-
产品互操作性
Ambari 2.7.5 仅支持 HDP-3.1.5 和 HDF-3.2.0 支持矩阵工具提供以下信息： 操作系统 数据库 浏览器 JDK 使用以下 URL 确定对每个产品版本的支持。 https://supportmatrix.hortonworks.com -
扩/缩容
DolphinScheduler扩容/缩容 文档 1. DolphinScheduler扩容文档 1.1. 基础软件安装(必装项请自行安装) 1.2. 获取安装包 1.3. 创建部署用户 1.4. 修改配置 1.4. 重启集群&验证 2. 缩容 2.1 停止缩容节点上的服务 2.2 修改配置文件 DolphinScheduler扩容/... -
设置 Ambari 服务器
更多信息 在启动 Ambari 服务器之前，您必须 设置 Ambari 服务器。安装程序将 Ambari 配置为与 Ambari 数据库通信、安装 JDK 并允许您自定义 Ambari 服务器守护程序将运行的用户帐户。这些设置可以通过命令行或在 Ambari 守护程序中设置。 ambari - server setup 命令管理设置过程。在 A... -
Docker 部署
前置条件 1. 安装 docker 2. 安装 docker-compose 部署 Apache StreamPark™ 1. 基于 h2 和 docker-compose 部署 Apache StreamPark™ 2. 部署 3. 配置flink home 4. 配置session集群 5. 提交 Flink 作业 使用已有的 Mysql ... -
升级步骤
DolphinScheduler 升级 准备工作 检查不向前兼容的更改 备份上一版本文件和数据库 下载新版本的安装包 升级步骤 停止 dolphinscheduler 所有服务 数据库升级 资源迁移 示例： 服务升级 修改 bin/env/install_env.sh 配置内容 注意事项 worker 分组的区别（以 1.3.1 版本... -
JDBC Connector
JDBC 信息配置 semantic 语义配置 EXACTLY_ONCE AT_LEAST_ONCE && NONE 其他配置 JDBC 读取数据 queryFunc获取一条sql resultFunc 处理查询到的数据 JDBC 读取写入 根据数据流生成目标SQL 设置写入批次大小 多实例 JDBC 支持 手动指定 JDBC 连接信... -
单机部署 (Standalone)
Standalone 极速体验版 前置准备工作 启动 DolphinScheduler Standalone Server 解压并启动 DolphinScheduler 登录 DolphinScheduler 启停服务 配置数据库 Standalone 极速体验版 Standalone 仅适用于 DolphinScheduler 的快速体验... -
名词解释
名词解释 模块介绍 在对 Apache DolphinScheduler 了解之前，我们先来认识一下调度系统常用的名词 名词解释 DAG： 全称 Directed Acyclic Graph，简称 DAG。工作流中的 Task 任务以有向无环图的形式组装起来，从入度为零的节点进行拓扑遍历，直到无后继节点为止。举例如下图： 流程定义 ：通过拖... -
任务结构
Shell节点 SQL节点 PROCEDURE[存储过程]节点 SPARK节点 MapReduce(MR)节点 Python节点 Flink节点 HTTP节点 DataX节点 Sqoop节点 条件分支节点 子流程节点 依赖(DEPENDENT)节点 在dolphinscheduler中创建的所有任务都保存在t_ds_process... -
Amazon DMS
DMS 节点 综述 创建任务 任务样例 首先介绍一些DS通用参数 DMS组件独有的参数 环境配置 DMS 节点 综述 AWS Database Migration Service (AWS DMS) 可帮助您快速并安全地将数据库迁移至 AWS。 源数据库在迁移过程中可继续正常运行，从而最大程度地减少依赖该数据库的应用程序的停机时间。 A...