-
Spark
SPARK节点 综述 创建任务 任务参数 任务样例 spark submit 执行 WordCount 程序 在 DolphinScheduler 中配置 Spark 环境 上传主程序包 配置 Spark 节点 spark sql 执行 DDL 和 DML 语句 注意事项： SPARK节点 综述 Spark 任务类型用于执行... -
内置参数
内置参数 基础内置参数 衍生内置参数 内置参数 基础内置参数 变量名 声明方式 含义 system.biz.date ${system.biz.date} 日常调度实例定时的定时时间前一天，格式为 yyyyMMdd system.biz.curdate ${system.biz.curdate} 日常调度实例... -
SQL
SQL 综述 创建数据源 创建任务 任务参数 任务样例 Hive表创建示例 在hive中创建临时表并写入数据 运行该任务成功之后在hive中查询结果 使用前置sql和后置sql示例 注意事项 SQL 综述 SQL任务类型，用于连接数据库并执行相应SQL。 创建数据源 可参考 数据源配置 数据源中心 。 创建任务 点击项... -
Alert SPI
DolphinScheduler Alert SPI 主要设计 DolphinScheduler SPI 设计 主要模块 Alert SPI 主要类信息： Alert SPI 内置实现 DolphinScheduler Alert SPI 主要设计 DolphinScheduler SPI 设计 DolphinScheduler 正在处于微内... -
Flink
Flink节点 综述 Flink 任务类型，用于执行 Flink 程序。对于 Flink 节点： 当程序类型为 Java、Scala 或 Python 时，worker 使用 Flink 命令提交任务 flink run 。更多详情查看 flink cli 。 当程序类型为 SQL 时，worker 使用sql-client.sh 提交任务。... -
Flink K8s 集成支持
额外环境要求 集成准备 Kubernetes 连接配置 Kubernetes RBAC 配置 Docker 远程容器服务配置 任务提交 Application 任务发布 Session 任务发布 相关参数配置 StreamPark Flink Kubernetes 基于 Flink Native Kubernetes 实现，支持以下 F... -
任务结构
Shell节点 SQL节点 PROCEDURE[存储过程]节点 SPARK节点 MapReduce(MR)节点 Python节点 Flink节点 HTTP节点 DataX节点 Sqoop节点 条件分支节点 子流程节点 依赖(DEPENDENT)节点 在dolphinscheduler中创建的所有任务都保存在t_ds_process... -
告警通知
webapi.conf server.conf 夜莺告警通知，内置支持邮件、钉钉机器人、企微机器人、飞书机器人多种方式作为发送通道，也支持调用自定义脚本和Webhook，给用户自定义发送通道的能力。相关配置在 webapi.conf 和 server.conf 中都有涉及。这里分别讲解。 webapi.conf [[ NotifyChannels ... -
Hadoop 资源集成
在 Flink on Kubernetes 上使用 Apache Hadoop 资源 1. Apache HDFS 1.1 添加 shade jar 1.2、添加 core-site.xml 和 hdfs-site.xml 2、Apache Hive i、添加 hive 相关的 jar 2.1. 添加 hive 的配置文件（hive-site.x... -
快速开始
关于 GitHub CLI 先决条件 一些有用的命令 查看您的状态 查看存储库 克隆存储库 创建存储库 处理问题 处理拉取请求 使用代码空间 寻求帮助 自定义 GitHub CLI 进一步阅读 关于 GitHub CLI GitHub CLI 是一个开源工具，用于从计算机的命令行使用 GitHub。当您使用命令行工作时，您可以...
