-
参数传递
参数的引用 本地任务引用全局参数 上游任务传递给下游任务 任务样例 创建 SHELL 任务并设置参数 创建 SQL 任务并使用参数 保存工作流并设置全局参数 查看运行结果 Python 任务传递参数 SubProcess 任务传递参数 Kubernetes 任务传递参数 参数的引用 DolphinScheduler 提供参数间相互引... -
DataX
DATAX 节点 综述 创建任务 任务参数 任务样例 在 DolphinScheduler 中配置 DataX 环境 配置 DataX 任务节点 查看运行结果 注意事项： DATAX 节点 综述 DataX 任务类型，用于执行 DataX 程序。对于 DataX 节点，worker 会通过执行 ${DATAX_LAUNCHER} 来... -
Metadata Table
Metadata Table Supporting Multi-Modal Index in Hudi Metadata table indices Enable Hudi Metadata Table and Multi-Modal Index in write side Use metadata indices for query side im... -
Architecture
Kyuubi Architecture Introduction Architecture Overview Unified Interface Runtime Resource Resiliency High Availability & Load Balance Authentication & Authorization Conclusio... -
Storage
Does Hudi support cloud storage/object stores? What is the difference between copy-on-write (COW) vs merge-on-read (MOR) table types? How do I migrate my data to Hudi? How to co... -
编程模型
架构 编程模型 DataStream Flink Sql TableEnvironment StreamTableEnvironment RunTime Context StreamingContext TableContext StreamTableContext 生命周期 生命周期之 — init 生命周期之 — config 生... -
Spark
SPARK节点 综述 创建任务 任务参数 任务样例 spark submit 执行 WordCount 程序 在 DolphinScheduler 中配置 Spark 环境 上传主程序包 配置 Spark 节点 spark sql 执行 DDL 和 DML 语句 注意事项： SPARK节点 综述 Spark 任务类型用于执行... -
内置参数
内置参数 基础内置参数 衍生内置参数 内置参数 基础内置参数 变量名 声明方式 含义 system.biz.date ${system.biz.date} 日常调度实例定时的定时时间前一天，格式为 yyyyMMdd system.biz.curdate ${system.biz.curdate} 日常调度实例... -
扩/缩容
DolphinScheduler扩容/缩容 文档 1. DolphinScheduler扩容文档 1.1. 基础软件安装(必装项请自行安装) 1.2. 获取安装包 1.3. 创建部署用户 1.4. 修改配置 1.4. 重启集群&验证 2. 缩容 2.1 停止缩容节点上的服务 2.2 修改配置文件 DolphinScheduler扩容/...
