-
工作流实例
查看工作流实例 查看任务日志 查看任务历史记录 查看运行参数 工作流实例操作功能 查看工作流实例 点击项目管理->工作流->工作流实例，进入工作流实例页面，如下图所示： 点击工作流名称，进入DAG查看页面，查看任务执行状态，如下图所示。 查看任务日志 进入工作流实例页面，点击工作流名称，进入DAG查看页面，双击任务节点，如下... -
Kubeflow
Kubeflow 综述 创建任务 任务样例 首先介绍一些DS通用参数 Kubeflow组件独有的参数 环境配置 Kubeflow 综述 Kubeflow 任务类型，用于在Kubeflow上创建任务。 后台主要使用 kubectl 命令来创建kubeflow任务, 并持续Kubeflow上资源状态直至任务完成。 目前主要支持通过使用ya... -
MapReduce
MapReduce(MR) 节点 综述 创建任务 任务参数 JAVA/SCALA 程序 Python 程序 任务样例 执行 WordCount 程序 在 DolphinScheduler 中配置 MapReduce 环境 上传主程序包 配置 MapReduce 节点 MapReduce(MR) 节点 综述 MapReduce(MR... -
SSO 集成
背景介绍 SSO 登录工作流 如何启用SSO登录 注意事项 背景介绍 作为企业实践，在应用程序中应用单点登录 (SSO) 是很常见的，这样可以通过集中且安全的方式管理用户凭证。 基于 Streampark 使用 Apache Shiro 进行身份验证和授权的事实，我们将使用 Pac4j 框架来实现单点登录 (SSO) 支持功能。 Pac4j 是... -
钉钉告警
1、创建钉钉机器人 2、在夜莺里创建机器人账号 3、在夜莺里创建团队 其他告警方式 1、创建钉钉机器人 首先创建一个钉钉群，然后进入群设置，找到智能群助手，点击【添加机器人】，找到【自定义】，如图： 进入自定义机器人页面，点击添加，给机器人取个名字，其次就是安全设置，这是钉钉新加的功能，老版本钉钉无需安全设置的，有三种安全设置方法，这里我们... -
SSH
RemoteShell 综述 创建任务 任务参数 任务样例 查看远程服务器(remote-server)的路径 注意事项 RemoteShell 综述 RemoteShell 任务类型，用于在远程服务器上执行命令。 创建任务 点击项目管理-项目名称-工作流定义，点击”创建工作流”按钮，进入 DAG 编辑页面。 工具栏中拖动 到画板... -
启动参数
启动参数 作用域 使用方式 任务样例 创建 Shell 任务 保存工作流，上线运行并设置启动参数 任务实例查看执行结果 修改启动参数，再次执行 任务实例查看执行结果 启动参数 作用域 启动参数是针对整个工作流 的所有任务节点都有效的参数，在工作流启动页面配置。 使用方式 启动参数配置方式如下：在启动前参数设置界面，点击“启动参数“... -
ChunJun
ChunJun节点 综述 创建任务 任务参数 任务样例 在 DolphinScheduler 中配置 ChunJun 环境 配置 ChunJun 任务节点 ChunJun节点 综述 ChunJun 任务类型，用于执行 ChunJun 程序。对于 ChunJun 节点，worker 会通过执行 ${CHUNJUN_HOME}/bin/sta... -
Apache Zeppelin
Apache Zeppelin 综述 创建任务 任务参数 生产（克隆）模式 任务样例 Zeppelin Paragraph 任务样例 Apache Zeppelin 综述 Zeppelin 任务类型，用于创建并执行Zeppelin 类型任务。worker 执行该任务的时候，会通过Zeppelin Cient API 触发Zeppelin ... -
Task SPI
DolphinScheduler Task SPI 扩展 如何进行任务插件开发？ DolphinScheduler Task SPI 扩展 如何进行任务插件开发？ org.apache.dolphinscheduler.spi.task.TaskChannel 插件实现以上接口即可。主要包含创建任务（任务初始化，任务运行等方法）、任务取消，如果是...
