-
元数据文档
表概览 用户 队列 数据源 项目 资源 告警 命令 流程 任务 核心表Schema t_ds_process_definition t_ds_process_instance t_ds_task_instance t_ds_schedules t_ds_command 表概览 表名 表信息 t_ds_access_t... -
HTTP Connector
HTTP 异步写入 Apache StreamPark™ 方式写入 http异步写入支持类型 http异步写入配置参数列表 http异步写入数据 其他配置 一些后台服务通过 HTTP 请求接收数据，这种场景下 Apache Flink 可以通过 HTTP 请求写入结果数据，目前 Apache Flink 官方未提供通过 HTTP 请求写入 数据... -
简介
Apache DolphinScheduler 是一个分布式易扩展的可视化DAG工作流任务调度开源系统。适用于企业级场景，提供了一个可视化操作任务、工作流和全生命周期数据处理过程的解决方案。 Apache DolphinScheduler 旨在解决复杂的大数据任务依赖关系，并为应用程序提供数据和各种 OPS 编排中的关系。 解决数据研发ETL依赖错综复杂... -
Apache Doris Connector
Apache StreamPark™ 方式写入 配置信息 写入 Doris Apache Doris 是一款基于大规模并行处理技术的分布式 SQL 数据库，主要面向 OLAP 场景。 Apache StreamPark 基于 Doris 的 stream load 封装了 DoirsSink 用于向 Doris 实时写入数据。 Apache ... -
Elasticsearch Connector
Elasticsearch 写入依赖 基于官网的Elasticsearch写入数据 Apache StreamPark™ 写入 Elasticsearch 1. 配置策略和连接信息 2. 写入Elasticsearch 其他配置 处理失败的 Elasticsearch 请求 配置内部批量处理器 Apache StreamPark™配置 E... -
元数据文档
表概览 用户 队列 数据源 项目 资源 告警 命令 流程 任务 核心表Schema t_ds_process_definition t_ds_process_instance t_ds_task_instance t_ds_schedules t_ds_command 表概览 表名 表信息 t_ds_access_t... -
定制服务
证书 数据库 目录 账户 所有配置 下一步 更多信息 自定义服务步骤为您提供了一组选项卡，可让您查看和修改集群设置。群集安装向导尝试为每个选项设置合理的默认值。强烈建议您检查这些设置，因为您的要求可能更高级。 Ambari 将常用的自定义配置元素分为四类：凭证、数据库、目录和帐户。所有其他配置将在安装向导的所有配置部分中提供 证书... -
文件参数传递
文件参数 使用方式 配置文件参数 输出文件给下游任务 获取上游任务的文件 其他 备注 样例 文件参数 通过配置文件参数，在同一工作流实例中，可以将上游任务工作目录下的文件(或文件夹，下统一以文件 代替)传递给下游任务。 如以下场景可能使用到 在ETL任务中，将多个上游任务处理好的数据文件一起传递给特定的下游任务。 在机器学习场景中，将... -
元数据文档
DolphinScheduler 元数据文档 表Schema E-R图 用户 队列 数据源 项目 资源 告警 项目 - 租户 - 工作流定义 - 定时 工作流定义和执行 DolphinScheduler 元数据文档 表Schema 详见dolphinscheduler/dolphinscheduler-dao/sr... -
DVC
DVC节点 综述 创建任务 任务样例 Init DVC Upload Download 环境准备 dvc 安装 DVC节点 综述 DVC（Data Version Control） 是一个MLops领域一个优秀的开机器学习版本管理系统。 DVC 组件用于在DS上使用DVC的数据版本管理功能，帮助用户简易地进行数据的版本管理。组件提...