-
快速上手
视频教程 图文教程 设置 Dolphinscheduler 构建您的第一个工作流程 创建租户 将租户分配给用户 创建项目 创建工作流 创建任务 设置任务依赖 运行工作流 查看日志 在本节中，我们将使用 DolphinScheduler 逐步创建和运行一个简单的工作流。 在这段旅程中，您将学习 DolphinScheduler 的基本... -
单机部署(Standalone)
1.1 : 基础软件安装(必装项请自行安装) 1.2 : 下载后端tar.gz包 1.3：创建部署用户并赋予目录操作权限 1.4 : ssh免密配置 1.5 : 数据库初始化 1.6 : 修改运行参数 1.7 : 安装python的Zookeeper工具kazoo 2.1 自动化部署 2.2 手动部署 DolphinScheduler单机... -
框架介绍
Apache StreamPark™ 🚀 什么是 Apache StreamPark™ 🎉 Features 🏳🌈 组成部分 1️⃣ streampark-core 2️⃣ streampark-console Apache StreamPark™ 一个神奇的框架，让流处理更简单！ 🚀 什么是 Apache StreamPark™ 实时... -
单机部署(Standalone)
1.1 : 基础软件安装(必装项请自行安装) 1.2 : 下载后端tar.gz包 1.3：创建部署用户并赋予目录操作权限 1.4 : ssh免密配置 1.5 : 数据库初始化 1.6 : 修改运行参数 1.7 : 安装python的Zookeeper工具kazoo 2.1 自动化部署 2.2 手动部署 DolphinScheduler单机... -
伪集群部署(Pseudo-Cluster)
伪集群部署 前置准备工作 准备 DolphinScheduler 启动环境 配置用户免密及权限 配置机器 SSH 免密登陆 启动 zookeeper 修改相关配置 修改 install_env.sh 文件 修改 dolphinscheduler_env.sh 文件 初始化数据库 启动 DolphinScheduler 登录 Dolph... -
单机部署 (Standalone)
PostgreSQL (8.2.15+) or MySQL (5.7系列)：两者任选其一即可 JDK (1.8+)：必装，请安装好后在/etc/profile下配置 JAVA_HOME 及 PATH 变量 ZooKeeper (3.4.6+)：必装 pstree or psmisc：Mac OS必装pstree，Fedora/Red/Hat/Ce... -
Docker 部署
前置条件 1. 安装 docker 2. 安装 docker-compose 部署 Apache StreamPark™ 1. 基于 h2 和 docker-compose 部署 Apache StreamPark™ 2. 部署 3. 配置flink home 4. 配置session集群 5. 提交 Flink 作业 使用已有的 Mysql ... -
MLflow
MLflow节点 综述 创建任务 任务样例 MLflow Projects BasicAlgorithm AutoML Custom projects MLflow Models MLFLOW Docker 环境准备 conda 环境配置 MLflow service 启动 内置算法仓库配置 MLflow节点 综述 MLf... -
文件参数传递
文件参数 使用方式 配置文件参数 输出文件给下游任务 获取上游任务的文件 其他 备注 样例 文件参数 通过配置文件参数，在同一工作流实例中，可以将上游任务工作目录下的文件(或文件夹，下统一以文件 代替)传递给下游任务。 如以下场景可能使用到 在ETL任务中，将多个上游任务处理好的数据文件一起传递给特定的下游任务。 在机器学习场景中，将... -
DVC
DVC节点 综述 创建任务 任务样例 Init DVC Upload Download 环境准备 dvc 安装 DVC节点 综述 DVC（Data Version Control） 是一个MLops领域一个优秀的开机器学习版本管理系统。 DVC 组件用于在DS上使用DVC的数据版本管理功能，帮助用户简易地进行数据的版本管理。组件提...