-
本地参数
本地参数 作用域 在任务定义页面配置的参数，默认作用域仅限该任务，如果配置了参数传递 则可将该参数作用到下游任务中。 使用方式 本地参数配置方式如下：在任务定义页面，点击“自定义参数”右边的加号，填写对应的变量名称和对应的值，保存即可。 如果要在单个任务中使用参数，请参阅通过自定义参数使用 如果要在任务中使用配置参数并在下游任务中使用它们： 如果... -
HTTP
HTTP 节点 综述 创建任务 任务参数 任务输出参数 任务样例 注意事项 HTTP 节点 综述 该节点用于执行 http 类型的任务，例如常见的 POST、GET 等请求类型，此外还支持 http 请求校验等功能。 创建任务 点击项目管理 -> 项目名称 -> 工作流定义，点击”创建工作流”按钮，进入 DAG 编辑页面： 拖动... -
元数据文档
表概览 用户 队列 数据源 项目 资源 告警 命令 流程 任务 核心表Schema t_ds_process_definition t_ds_process_instance t_ds_task_instance t_ds_schedules t_ds_command 表概览 表名 表信息 t_ds_access_t... -
软硬件环境建议配置
1. Linux 操作系统版本要求 2. 服务器建议配置 3. 网络要求 4. 客户端 Web 浏览器要求 DolphinScheduler 作为一款开源分布式工作流任务调度系统，可以很好的部署和运行在 Intel 架构服务器环境及主流虚拟化环境下，并支持主流的Linux操作系统环境。 1. Linux 操作系统版本要求 操作系统 版本... -
Distributed collections
Map Redis or Valkey based distributed Map object for Java implements ConcurrentMap interface. This object is thread-safe. Consider to use Live Object service to store POJO obje... -
Java
JAVA 节点 综述 创建任务 任务参数 任务样例 注意事项 JAVA 节点 综述 该节点用于执行 java 类型的任务，支持使用单文件和jar包作为程序入口。 创建任务 点击项目管理 -> 项目名称 -> 工作流定义，点击”创建工作流”按钮，进入 DAG 编辑页面： 拖动工具栏的JAVA任务节点到画板中。 任务参数 默... -
名词解释
名词解释 模块介绍 在对 Apache DolphinScheduler 了解之前，我们先来认识一下调度系统常用的名词 名词解释 DAG： 全称 Directed Acyclic Graph，简称 DAG。工作流中的 Task 任务以有向无环图的形式组装起来，从入度为零的节点进行拓扑遍历，直到无后继节点为止。举例如下图： 流程定义 ：通过拖... -
Jupyter
Jupyter 综述 Conda虚拟环境配置 Python依赖管理 使用预装好的Conda环境 使用打包的Conda环境 由依赖需求文本文件临时构建 创建任务 任务参数 任务样例 简单的Jupyter任务样例 Jupyter 综述 Jupyter 任务类型，用于创建并执行Jupyter 类型任务。worker 执行该任务的时候，会... -
Gobblin on Yarn
Introduction Architecture Overview The Role of Apache Helix Gobblin Yarn Application Launcher YarnAppSecurityManager LogCopier Gobblin ApplicationMaster YarnService GobblinH... -
Amazon DMS
DMS 节点 综述 创建任务 任务样例 首先介绍一些DS通用参数 DMS组件独有的参数 环境配置 DMS 节点 综述 AWS Database Migration Service (AWS DMS) 可帮助您快速并安全地将数据库迁移至 AWS。 源数据库在迁移过程中可继续正常运行，从而最大程度地减少依赖该数据库的应用程序的停机时间。 A...
