-
快速上手
配置FLINK_HOME 配置Flink Cluster 服务器启动 flink Standalone Session 配置Flink Cluster 创建作业 主要参数 创建作业 保存作业 构建作业 启动作业 启动检查点设置 提交作业 查看作业状态 通过Apache StreamPark™看板查看 查看原生 flink web u... -
软硬件环境建议配置
1. Linux 操作系统版本要求 2. 服务器建议配置 3. 网络要求 4. 客户端 Web 浏览器要求 DolphinScheduler 作为一款开源分布式工作流任务调度系统，可以很好的部署和运行在 Intel 架构服务器环境及主流虚拟化环境下，并支持主流的Linux操作系统环境。 1. Linux 操作系统版本要求 操作系统 版本... -
编程模型
架构 编程模型 DataStream Flink Sql TableEnvironment StreamTableEnvironment RunTime Context StreamingContext TableContext StreamTableContext 生命周期 生命周期之 — init 生命周期之 — config 生... -
设置 Ambari 服务器
更多信息 在启动 Ambari 服务器之前，您必须 设置 Ambari 服务器。安装程序将 Ambari 配置为与 Ambari 数据库通信、安装 JDK 并允许您自定义 Ambari 服务器守护程序将运行的用户帐户。这些设置可以通过命令行或在 Ambari 守护程序中设置。 ambari - server setup 命令管理设置过程。在 A... -
软硬件环境建议配置
1. Linux 操作系统版本要求 2. 服务器建议配置 3. 网络要求 4. 客户端 Web 浏览器要求 DolphinScheduler 作为一款开源分布式工作流任务调度系统，可以很好的部署和运行在 Intel 架构服务器环境及主流虚拟化环境下，并支持主流的Linux操作系统环境。 1. Linux 操作系统版本要求 操作系统 版本... -
Flink
Flink节点 综述 Flink 任务类型，用于执行 Flink 程序。对于 Flink 节点： 当程序类型为 Java、Scala 或 Python 时，worker 使用 Flink 命令提交任务 flink run 。更多详情查看 flink cli 。 当程序类型为 SQL 时，worker 使用sql-client.sh 提交任务。... -
Docker 部署
前置条件 1. 安装 docker 2. 安装 docker-compose 部署 Apache StreamPark™ 1. 基于 h2 和 docker-compose 部署 Apache StreamPark™ 2. 部署 3. 配置flink home 4. 配置session集群 5. 提交 Flink 作业 使用已有的 Mysql ... -
Alert SPI
DolphinScheduler Alert SPI 主要设计 DolphinScheduler SPI 设计 主要模块 Alert SPI 主要类信息： Alert SPI 内置实现 DolphinScheduler Alert SPI 主要设计 DolphinScheduler SPI 设计 DolphinScheduler 正在处于微内... -
告警通知
webapi.conf server.conf 夜莺告警通知，内置支持邮件、钉钉机器人、企微机器人、飞书机器人多种方式作为发送通道，也支持调用自定义脚本和Webhook，给用户自定义发送通道的能力。相关配置在 webapi.conf 和 server.conf 中都有涉及。这里分别讲解。 webapi.conf [[ NotifyChannels ... -
JDBC Connector
JDBC 信息配置 semantic 语义配置 EXACTLY_ONCE AT_LEAST_ONCE && NONE 其他配置 JDBC 读取数据 queryFunc获取一条sql resultFunc 处理查询到的数据 JDBC 读取写入 根据数据流生成目标SQL 设置写入批次大小 多实例 JDBC 支持 手动指定 JDBC 连接信...