-
Using Spark
Hudi Streamer Options Using hudi-utilities bundle jars Concurrency Control Checkpointing Transformers SQL Query Transformer SQL File Transformer Flattening Transformer Chai... -
软硬件环境建议配置
1. Linux 操作系统版本要求 2. 服务器建议配置 生产环境 3. 网络要求 4. 客户端 Web 浏览器要求 DolphinScheduler 作为一款开源分布式工作流任务调度系统，可以很好的部署和运行在 Intel 架构服务器环境及主流虚拟化环境下，并支持主流的Linux操作系统环境。 1. Linux 操作系统版本要求 操作... -
创建 GitHub CLI 扩展
关于 GitHub CLI 扩展 使用 gh extension create 创建扩展 使用 gh extension create 在 Go 中创建预编译扩展 使用 gh extension create 创建非 Go 预编译扩展 手动创建扩展 编写解释型 GitHub CLI 扩展的技巧 处理参数和标志 非交互方式调用核心命令 以编... -
What is Apache StreamPark™
Apache StreamPark™ 🚀 What is Apache StreamPark™ Why Apache StreamPark™? 🎉 Features 🏳🌈 Architecture of Apache StreamPark™ 1️⃣ streampark-core 2️⃣ streampark-console Apache... -
Hadoop 资源集成
在 Flink on Kubernetes 上使用 Apache Hadoop 资源 1. Apache HDFS 1.1 添加 shade jar 1.2、添加 core-site.xml 和 hdfs-site.xml 2、Apache Hive i、添加 hive 相关的 jar 2.1. 添加 hive 的配置文件（hive-site.x... -
1. Getting Started with Kyuubi
Getting Started with Kyuubi Getting Kyuubi Requirements Installation Running Kyuubi Setup JAVA Starting Kyuubi Using Hive Beeline Opening a Connection Execute Statements Cl... -
名词解释
名词解释 模块介绍 在对 Apache DolphinScheduler 了解之前，我们先来认识一下调度系统常用的名词 名词解释 DAG： 全称 Directed Acyclic Graph，简称 DAG。工作流中的 Task 任务以有向无环图的形式组装起来，从入度为零的节点进行拓扑遍历，直到无后继节点为止。举例如下图： 流程定义 ：通过拖... -
Storage
Does Hudi support cloud storage/object stores? What is the difference between copy-on-write (COW) vs merge-on-read (MOR) table types? How do I migrate my data to Hudi? How to co... -
告警自愈模块
概述 架构 项目地址 安装启动 初始化 sql 启动 server 启动agentd Ibex 是告警自愈功能依赖的模块，提供一个批量执行命令的通道，可以做到在告警的时候自动去目标机器执行脚本，如果大家没有此需求，无需阅读本节内容。 概述 所谓的告警自愈，典型手段是在告警触发时自动回调某个 webhook 地址，在这个 webhook 里... -
Redis Connector
Redis Write Dependency Writing Redis the Regular Way 1.Access to source 2. Write to redis Apache StreamPark™ Writes to Redis 1. Configure policy and connection information 2. ...