-
集群部署(Cluster)
集群部署(Cluster) 部署步骤 前置准备工作 && 准备 DolphinScheduler 启动环境 修改相关配置 启动 DolphinScheduler && 登录 DolphinScheduler && 启停服务 集群部署(Cluster) 集群部署目的是在多台机器部署 DolphinScheduler 服务，用于运行大量任务情况。 ... -
DVC
DVC节点 综述 创建任务 任务样例 Init DVC Upload Download 环境准备 dvc 安装 DVC节点 综述 DVC（Data Version Control） 是一个MLops领域一个优秀的开机器学习版本管理系统。 DVC 组件用于在DS上使用DVC的数据版本管理功能，帮助用户简易地进行数据的版本管理。组件提... -
全局参数
全局参数 作用域 使用方式 创建 Shell 任务 保存工作流，并设置全局参数 任务实例查看执行结果 全局参数 作用域 全局参数在工作流定义页面配置。 方向是 IN 的变量是针对整个工作流 的所有任务节点都有效的参数。 方向是 OUT 的变量作为该工作流的输出参数，传递到父工作流中对应 SubProcess 任务的下游任务。 使用方... -
SageMaker
SageMaker 节点 综述 创建任务 任务样例 环境配置 SageMaker 节点 综述 Amazon SageMaker 是一个云机器学习平台。 提供了完整的基础设施，工具和工作流来帮助用户可以创建、训练和发布机器学习模型。 Amazon SageMaker Model Building Pipelines 是一个可以直接使用Sa... -
基于Rainbond部署(Cluster)
基于 Rainbond 部署 DolphinScheduler 高可用集群 前提条件 DolphinScheduler 集群一键部署 API Master Worker 节点伸缩 配置文件 如何支持 Python 3？ 如何支持 Hadoop, Spark, DataX 等？ 基于 Rainbond 部署 DolphinScheduler ... -
Sqoop
SQOOP 节点 综述 创建任务 任务参数 任务样例 配置 Sqoop 环境 配置 Sqoop 任务节点 查看运行结果 SQOOP 节点 综述 SQOOP 任务类型，用于执行 SQOOP 程序。对于 SQOOP 节点，worker 会通过执行 sqoop 命令来执行 SQOOP 任务。 创建任务 点击项目管理 -> 项目名称 -... -
Kubernetes
Kubernetes 综述 创建任务 任务参数 任务样例 在 DolphinScheduler 中配置 kubernetes 集群环境 配置 kubernetes 任务节点 注意事项 Kubernetes 综述 kubernetes任务类型，用于在kubernetes上执行一个短时和批处理的任务。worker最终会通过使用kuberne... -
元数据文档
DolphinScheduler 元数据文档 表Schema E-R图 用户 队列 数据源 项目 资源 告警 项目 - 租户 - 工作流定义 - 定时 工作流定义和执行 DolphinScheduler 元数据文档 表Schema 详见dolphinscheduler/dolphinscheduler-dao/sr... -
版本升级指南
升级前准备 找到升级脚本 执行升级脚本 示例：从 2.0.0 升级到 2.1.2 验证升级 遇到问题怎么办 下一步 升级前准备 在开始升级之前，请确保已完成以下准备工作，以确保升级过程顺利进行。 备份数据库 ：非常重要的一步，确保有完整的数据库备份，以便在升级过程中遇到问题时可以恢复到升级前的状态。 检查版本兼容性 ：确认当前的版本号，... -
Openmldb
OpenMLDB 节点 综述 创建任务 任务样例 导入数据 特征抽取 环境准备 OpenMLDB 启动 Python 环境 OpenMLDB 节点 综述 OpenMLDB 是一个优秀的开源机器学习数据库，提供生产级数据及特征开发全栈解决方案。 OpenMLDB任务组件可以连接OpenMLDB集群执行任务。 创建任务 点击项目...
