-
不向前兼容的更新
不向前兼容的更新 dev 3.2.0 3.0.0 3.2.0 不向前兼容的更新 本文档记录了各版本之间不兼容的更新内容。在升级到相关版本前，请检查本文档。 dev 将mysql驱动版本从8.0.16升级至8.0.33 (#14684 ) 更改了环境变量名称，将 PYTHON_HOME 改为 PYTHON_LAUNCHER ， 将 DAT... -
文件参数传递
文件参数 使用方式 配置文件参数 输出文件给下游任务 获取上游任务的文件 其他 备注 样例 文件参数 通过配置文件参数，在同一工作流实例中，可以将上游任务工作目录下的文件(或文件夹，下统一以文件 代替)传递给下游任务。 如以下场景可能使用到 在ETL任务中，将多个上游任务处理好的数据文件一起传递给特定的下游任务。 在机器学习场景中，将... -
Falcon 插件
Nightingale 实现了 Open-Falcon 的 HTTP 数据接收接口，所以，Open-Falcon 社区很多采集插件也是可以直接使用的。但是 Falcon-Agent 不行，因为 Falcon-Agent 推送监控数据给服务端，走的是 RPC 接口。 如果你发现某个 Falcon-Plugin 是用 CRON 的方式驱动的，推送数据走的是 ... -
数据推送
OpenTSDB 协议 RemoteWrite 协议 推给客户端 在 采集器 章节可以看出，夜莺支持多种数据接收的接口（由 n9e-server 实现，推送数据就是推给 n9e-server 的 19000 端口），包括 OpenTSDB、Open-Falcon、RemoteWrite、Datadog 等协议。这节我们以 OpenTSDB 的数据接... -
自监控
夜莺 5.x 版本有 n9e-webapi 和 n9e-server 两个模块，这俩模块都暴露了 /metrics 接口，所以，夜莺自身组件的监控，就有两个做法，做法一： 搞一个单独的 Prometheus，抓取 n9e-webapi 和 n9e-server 的 /metrics 的数据 在这个单独的 Prometheus 里配置 up 指标的告... -
Grafana-agent
1. 下载二进制 2. 生成配置 3. 启动 grafana-agent Grafana-agent 是 Grafana 开源的一款 Agent，专门用于和自己的 Cloud 做数据采集集成，通过 remote write 协议推数据给后端，和 Categraf 的数据推送方式一样，所以，也是可以作为 Nightingale 的采集器的。Grafan... -
Datasource SPI
DolphinScheduler Datasource SPI 主要设计 如何使用数据源？ 如何进行数据源插件开发？ 未来计划 DolphinScheduler Datasource SPI 主要设计 如何使用数据源？ 数据源中心默认支持POSTGRESQL、HIVE/IMPALA、SPARK、CLICKHOUSE、SQLSERVER数据源。... -
Datadog-agent
1、注册datadog的账号 2、选择套餐 3、拿到agent安装命令 4、修改配置文件 5、重启datadog-agent Datadog 是专门提供监控和分析服务的 SaaS 服务商，市值几百亿，成立了10多年了，他们做的客户端采集器，理论上应该是比较完备的，夜莺实现了几个 Datadog 特定的接口，可以接收Datadog-Agent 推送... -
企业微信
企业微信 发送类型 应用 前置 向指定用户发消息 参考文档 群聊 前置 参考文档 企业微信 如果您需要使用到企业微信进行告警，请在告警实例管理里创建告警实例，选择 WeChat 插件。企业微信的配置样例如下： 发送类型 其中send.type 分别对应向企业微信自定义应用发送和向企业微信API创建的群聊发送消息。 应用 应用... -
Task SPI
DolphinScheduler Task SPI 扩展 如何进行任务插件开发？ DolphinScheduler Task SPI 扩展 如何进行任务插件开发？ org.apache.dolphinscheduler.spi.task.TaskChannel 插件实现以上接口即可。主要包含创建任务（任务初始化，任务运行等方法）、任务取消，如果是...