-
Kubernetes部署(Kubernetes)
快速试用 Kubernetes 部署 Kubernetes 部署目的是在 Kubernetes 集群中部署 DolphinScheduler 服务，能调度大量任务，可用于在生产中部署。 如果你是新手，想要体验 DolphinScheduler 的功能，推荐使用Standalone 方式体检。如果你想体验更完整的功能，或者更大的任务量，推荐使用伪集群部署 ... -
二进制方式
组件安装 安装夜莺 部署集群 MySQL Redis 时序库 n9e-webapi n9e-server 首先我们来看下面的架构图，夜莺的服务端有两个模块：n9e-webapi 和 n9e-server，n9e-webapi 用于提供 API 给前端 JavaScript 使用，n9e-server 的职责是告警引擎和数据转发器。依赖的组件... -
任务结构
任务总体存储结构 各任务类型存储结构详解 Shell节点 SQL节点 PROCEDURE[存储过程]节点 SPARK节点 MapReduce(MR)节点 Python节点 Flink节点 HTTP节点 DataX节点 Sqoop节点 条件分支节点 子流程节点 依赖(DEPENDENT)节点 任务总体存储结构 在dolphin... -
项目配置
为什么需要配置 flink option property 基础参数 Memory参数 配置总内存 Table app sql 总结 配置在StreamPark 中是非常重要的概念,先说说为什么需要配置 为什么需要配置 开发DataStream 程序,大体流程都可以抽象为以下4步 StreamExecutionEnvironm... -
编程模型
架构 编程模型 DataStream Flink Sql TableEnvironment StreamTableEnvironment RunTime Context StreamingContext TableContext StreamTableContext 生命周期 生命周期之 — init 生命周期之 — config 生... -
任务结构
Shell节点 SQL节点 PROCEDURE[存储过程]节点 SPARK节点 MapReduce(MR)节点 Python节点 Flink节点 HTTP节点 DataX节点 Sqoop节点 条件分支节点 子流程节点 依赖(DEPENDENT)节点 在dolphinscheduler中创建的所有任务都保存在t_ds_process... -
快速开始
如何使用 部署 DataStream 任务 部署 FlinkSql 任务 任务启动流程 如何使用 在上个章节已经详细介绍了一站式平台 streampark-console 的安装, 本章节看看如果用 streampark-console 快速部署运行一个作业, streampark-console 对标准的 Flink 程序 ( 按照 Fl... -
数据推送
OpenTSDB 协议 RemoteWrite 协议 推给客户端 在 采集器 章节可以看出，夜莺支持多种数据接收的接口（由 n9e-server 实现，推送数据就是推给 n9e-server 的 19000 端口），包括 OpenTSDB、Open-Falcon、RemoteWrite、Datadog 等协议。这节我们以 OpenTSDB 的数据接... -
Grafana-agent
1. 下载二进制 2. 生成配置 3. 启动 grafana-agent Grafana-agent 是 Grafana 开源的一款 Agent，专门用于和自己的 Cloud 做数据采集集成，通过 remote write 协议推数据给后端，和 Categraf 的数据推送方式一样，所以，也是可以作为 Nightingale 的采集器的。Grafan... -
MySQL
MySQL 数据源 是否原生支持 MySQL 数据源 数据源：选择 MYSQL 数据源名称：输入数据源的名称 描述：输入数据源的描述 IP 主机名：输入连接 MySQL 的 IP 端口：输入连接 MySQL 的端口 用户名：设置连接 MySQL 的用户名 密码：设置连接 MySQL 的密码 数据库名：输入连接 MySQL 的数据库名称 Jdbc...
