-
Spark
SPARK节点 综述 创建任务 任务参数 任务样例 spark submit 执行 WordCount 程序 在 DolphinScheduler 中配置 Spark 环境 上传主程序包 配置 Spark 节点 spark sql 执行 DDL 和 DML 语句 注意事项： SPARK节点 综述 Spark 任务类型用于执行... -
内置参数
内置参数 基础内置参数 衍生内置参数 内置参数 基础内置参数 变量名 声明方式 含义 system.biz.date ${system.biz.date} 日常调度实例定时的定时时间前一天，格式为 yyyyMMdd system.biz.curdate ${system.biz.curdate} 日常调度实例... -
编程模型
架构 编程模型 DataStream Flink Sql TableEnvironment StreamTableEnvironment RunTime Context StreamingContext TableContext StreamTableContext 生命周期 生命周期之 — init 生命周期之 — config 生... -
Flink
Flink节点 综述 Flink 任务类型，用于执行 Flink 程序。对于 Flink 节点： 当程序类型为 Java、Scala 或 Python 时，worker 使用 Flink 命令提交任务 flink run 。更多详情查看 flink cli 。 当程序类型为 SQL 时，worker 使用sql-client.sh 提交任务。... -
Alert SPI
DolphinScheduler Alert SPI 主要设计 DolphinScheduler SPI 设计 主要模块 Alert SPI 主要类信息： Alert SPI 内置实现 DolphinScheduler Alert SPI 主要设计 DolphinScheduler SPI 设计 DolphinScheduler 正在处于微内... -
Flink K8s 集成支持
额外环境要求 集成准备 Kubernetes 连接配置 Kubernetes RBAC 配置 Docker 远程容器服务配置 任务提交 Application 任务发布 Session 任务发布 相关参数配置 StreamPark Flink Kubernetes 基于 Flink Native Kubernetes 实现，支持以下 F... -
设置 Ambari 服务器
更多信息 在启动 Ambari 服务器之前，您必须 设置 Ambari 服务器。安装程序将 Ambari 配置为与 Ambari 数据库通信、安装 JDK 并允许您自定义 Ambari 服务器守护程序将运行的用户帐户。这些设置可以通过命令行或在 Ambari 守护程序中设置。 ambari - server setup 命令管理设置过程。在 A... -
告警通知
webapi.conf server.conf 夜莺告警通知，内置支持邮件、钉钉机器人、企微机器人、飞书机器人多种方式作为发送通道，也支持调用自定义脚本和Webhook，给用户自定义发送通道的能力。相关配置在 webapi.conf 和 server.conf 中都有涉及。这里分别讲解。 webapi.conf [[ NotifyChannels ... -
任务结构
Shell节点 SQL节点 PROCEDURE[存储过程]节点 SPARK节点 MapReduce(MR)节点 Python节点 Flink节点 HTTP节点 DataX节点 Sqoop节点 条件分支节点 子流程节点 依赖(DEPENDENT)节点 在dolphinscheduler中创建的所有任务都保存在t_ds_process... -
快速开始
关于 GitHub CLI 先决条件 一些有用的命令 查看您的状态 查看存储库 克隆存储库 创建存储库 处理问题 处理拉取请求 使用代码空间 寻求帮助 自定义 GitHub CLI 进一步阅读 关于 GitHub CLI GitHub CLI 是一个开源工具，用于从计算机的命令行使用 GitHub。当您使用命令行工作时，您可以...