-
Spark
SPARK节点 综述 创建任务 任务参数 任务样例 spark submit 执行 WordCount 程序 在 DolphinScheduler 中配置 Spark 环境 上传主程序包 配置 Spark 节点 spark sql 执行 DDL 和 DML 语句 注意事项： SPARK节点 综述 Spark 任务类型用于执行... -
Platform Deployment
Environmental requirements Hadoop Kubernetes Build & Deploy Environmental requirements install streampark Initialize table structure Modify the configurat... -
1. Introduction to the Kyuubi Configurations System
Introduction to the Kyuubi Configurations System Environments Kyuubi Configurations Authentication Backend Delegation Engine Frontend Ha Kinit Metrics Operation Session ... -
数据质量
概述 任务类型介绍 注意事项 检查逻辑详解 任务操作指南 单表检查之空值检查 检查介绍 界面操作指南 单表检查之及时性检查 检查介绍 界面操作指南 单表检查之字段长度校验 检查介绍 界面操作指南 单表检查之唯一性校验 检查介绍 界面操作指南 单表检查之正则表达式校验 检查介绍 界面操作指南 单表检查之枚举值校验 检查介绍... -
Apache Hudi Stack
Lake Storage File Formats Transactional Database Layer Table Format Indexes Table Services Clustering Compaction Cleaning Indexing Concurrency Control Lake Cache* Metase... -
扩/缩容
DolphinScheduler扩容/缩容 文档 1. DolphinScheduler扩容文档 1.1. 基础软件安装(必装项请自行安装) 1.2. 获取安装包 1.3. 创建部署用户 1.4. 修改配置 1.4. 重启集群&验证 2. 缩容 2.1 停止缩容节点上的服务 2.2 修改配置文件 DolphinScheduler扩容/... -
Flink
Flink节点 综述 Flink 任务类型，用于执行 Flink 程序。对于 Flink 节点： 当程序类型为 Java、Scala 或 Python 时，worker 使用 Flink 命令提交任务 flink run 。更多详情查看 flink cli 。 当程序类型为 SQL 时，worker 使用sql-client.sh 提交任务。... -
安全中心（权限系统）
安全中心（权限系统） 创建队列 添加租户 创建普通用户 编辑用户信息 修改用户密码 创建告警组 令牌管理 授予权限 Worker 分组 新增 / 更新 worker 分组 环境管理 集群管理 命名空间管理 安全中心（权限系统） 安全中心只有管理员账户才有权限操作，分别有队列管理、租户管理、用户管理、告警组管理、worker分... -
3. Integration with Hive Metastore
Integration with Hive Metastore Requirements Default Behavior Related Configurations Remote Metastore Database Remote Metastore Server Activate Configurations Via kyuubi-defau... -
Using Spark
Hudi Streamer Options Using hudi-utilities bundle jars Concurrency Control Checkpointing Transformers SQL Query Transformer SQL File Transformer Flattening Transformer Chai...