-
Elasticsearch Connector
Dependency of elastic writing Write data to Elasticsearch based on the official Using Apache StreamPark™ writes to Elasticsearch 1. 配置策略和连接信息 2. 写入Elasticsearch Other configur... -
DVC
DVC节点 综述 创建任务 任务样例 Init DVC Upload Download 环境准备 dvc 安装 DVC节点 综述 DVC（Data Version Control） 是一个MLops领域一个优秀的开机器学习版本管理系统。 DVC 组件用于在DS上使用DVC的数据版本管理功能，帮助用户简易地进行数据的版本管理。组件提... -
快速开始
如何使用 部署 DataStream 任务 部署 FlinkSql 任务 任务启动流程 如何使用 在上个章节已经详细介绍了一站式平台 streampark-console 的安装, 本章节看看如果用 streampark-console 快速部署运行一个作业, streampark-console 对标准的 Flink 程序 ( 按照 Fl... -
Telegraf
Telegraf 是 InfluxData 公司开源的一款采集器，内置非常多的采集插件，不过 Telegraf 是面向 InfluxDB 生态的，采集的监控数据推给 InfluxDB 非常合适，推给 Prometheus、Victoriametrics、Thanos 这些时序库，可能会带来问题。主要是两点： 有些数据是 string 类型的，Prome... -
告警组件向导
如何创建告警插件以及告警组 如何创建告警插件以及告警组 在 2.0.0 版本中，用户需要创建告警实例，在创建告警实例时，需要选择告警策略，有三个选项，成功发、失败发，以及成功和失败都发。在执行完工作流或任务时，如果触发告警，调用告警实例发送方法会进行逻辑判断，将告警实例与任务状态进行匹配，匹配则执行该告警实例发送逻辑，不匹配则过滤。创建完告警实例后，需... -
SNMP
switch_legacy snmp 监控网络设备，主要是通过 SNMP 协议，Categraf、Telegraf、Datadog-Agent、snmp_exporter 都提供了这个能力。 switch_legacy Categraf 提供了一个网络设备的采集插件：switch_legacy，在 conf/input.switch_legacy ... -
6. 安装、配置和部署集群
使用浏览器中运行的 Ambari 集群安装向导来安装、配置和部署集群，如下所示： 启动 Ambari 服务器 登录 Apache Ambari 启动 Ambari 群集安装向导 为集群命名 选择版本 安装选项 确认主机 选择服务 分配主节点 分配子节点和客户端 定制服务 回顾 安装、启动和测试 完成 -
Pytorch
Pytorch 节点（试验版） 综述 创建任务 任务样例 Pytorch参数 运行参数 python环境参数 Demo 环境配置 指定python路径 使用Conda创建新环境 使用virtualenv创建新环境 其他 Pytorch 节点（试验版） 综述 Pytorch 是一个的主流Python机器学习库。 为了用户能够... -
全局参数
全局参数 作用域 使用方式 创建 Shell 任务 保存工作流，并设置全局参数 任务实例查看执行结果 全局参数 作用域 全局参数在工作流定义页面配置。 方向是 IN 的变量是针对整个工作流 的所有任务节点都有效的参数。 方向是 OUT 的变量作为该工作流的输出参数，传递到父工作流中对应 SubProcess 任务的下游任务。 使用方... -
升级
1. 备份上一版本文件和数据库 2. 停止dolphinscheduler所有服务 3. 下载新版本的安装包 4. 数据库升级 5. 服务升级 5.1 修改conf/config/install_config.conf 配置内容 注意事项 升级时如何设置worker分组与之前一致 5.2 执行部署脚本 1. 备份上一版本文件和数据库 ...