-
参数传递
参数的引用 本地任务引用全局参数 上游任务传递给下游任务 任务样例 创建 SHELL 任务并设置参数 创建 SQL 任务并使用参数 保存工作流并设置全局参数 查看运行结果 Python 任务传递参数 SubProcess 任务传递参数 Kubernetes 任务传递参数 参数的引用 DolphinScheduler 提供参数间相互引... -
DataX
DATAX 节点 综述 创建任务 任务参数 任务样例 在 DolphinScheduler 中配置 DataX 环境 配置 DataX 任务节点 查看运行结果 注意事项： DATAX 节点 综述 DataX 任务类型，用于执行 DataX 程序。对于 DataX 节点，worker 会通过执行 ${DATAX_LAUNCHER} 来... -
扩/缩容
DolphinScheduler扩容/缩容 文档 1. DolphinScheduler扩容文档 1.1. 基础软件安装(必装项请自行安装) 1.2. 获取安装包 1.3. 创建部署用户 1.4. 修改配置 1.4. 重启集群&验证 2. 缩容 2.1 停止缩容节点上的服务 2.2 修改配置文件 DolphinScheduler扩容/... -
Categraf
基本介绍 采集插件 基本介绍 Categraf 是一款 all-in-one 的采集器，由 快猫团队 开源，代码托管在： github: https://github.com/flashcatcloud/categraf Categraf 不但可以采集 OS、MySQL、Redis、Oracle 等常见的监控对象，也准备提供日志采集能力和 ... -
Docker 部署
前置条件 1. 安装 docker 2. 安装 docker-compose 部署 Apache StreamPark™ 1. 基于 h2 和 docker-compose 部署 Apache StreamPark™ 2. 部署 3. 配置flink home 4. 配置session集群 5. 提交 Flink 作业 使用已有的 Mysql ... -
3. Integration with Hive Metastore
Integration with Hive Metastore Requirements Default Behavior Related Configurations Remote Metastore Database Remote Metastore Server Activate Configurations Via kyuubi-defau... -
升级步骤
DolphinScheduler 升级 准备工作 检查不向前兼容的更改 备份上一版本文件和数据库 下载新版本的安装包 升级步骤 停止 dolphinscheduler 所有服务 数据库升级 资源迁移 示例： 服务升级 修改 bin/env/install_env.sh 配置内容 注意事项 worker 分组的区别（以 1.3.1 版本... -
JDBC Connector
JDBC 信息配置 semantic 语义配置 EXACTLY_ONCE AT_LEAST_ONCE && NONE 其他配置 JDBC 读取数据 queryFunc获取一条sql resultFunc 处理查询到的数据 JDBC 读取写入 根据数据流生成目标SQL 设置写入批次大小 多实例 JDBC 支持 手动指定 JDBC 连接信... -
单机部署 (Standalone)
Standalone 极速体验版 前置准备工作 启动 DolphinScheduler Standalone Server 解压并启动 DolphinScheduler 登录 DolphinScheduler 启停服务 配置数据库 Standalone 极速体验版 Standalone 仅适用于 DolphinScheduler 的快速体验... -
Introduction
Architecture Supported table formats Supported engines Iceberg format Paimon format Mixed format User cases Self-managed streaming Lakehouse Stream-and-batch-fused data pipe...
