-
Kubernetes部署(Kubernetes)
快速试用 Kubernetes 部署 Kubernetes 部署目的是在 Kubernetes 集群中部署 DolphinScheduler 服务，能调度大量任务，可用于在生产中部署。 如果你是新手，想要体验 DolphinScheduler 的功能，推荐使用Standalone 方式体检。如果你想体验更完整的功能，或者更大的任务量，推荐使用伪集群部署 ... -
配置文件
目录结构 1.dolphinscheduler-daemon.sh [启动/关闭DS服务脚本] 2.datasource.properties [数据库连接] 3.zookeeper.properties [zookeeper连接配置] 4.common.properties [hadoop、s3、yarn配置] 5.application-api... -
All Configurations
Externalized Config File Hudi Table Config Hudi Table Basic Configs Spark Datasource Configs Read Options Write Options PreCommit Validator Configurations Flink Sql Configs ... -
架构设计
1.名词解释 2.系统架构 2.1 系统架构图 2.2 启动流程活动图 2.3 架构说明 该服务内主要包含: 该服务包含： 2.3 架构设计思想 一、去中心化vs中心化 中心化思想 去中心化 二、分布式锁实践 三、线程不足循环等待问题 四、容错设计 1. 宕机容错 2.任务失败重试 五、任务优先级设计 六、Logback和net... -
架构设计
系统架构设计 系统架构 系统架构图 启动流程活动图 架构说明 该服务内主要包含: 该服务包含： 架构设计思想 一、去中心化vs中心化 中心化思想 去中心化 二、容错设计 宕机容错 三、任务失败重试 四、任务优先级设计 五、Logback和netty实现日志访问 总结 系统架构设计 系统架构 系统架构图 ... -
Kyuubi v.s. Spark Thrift JDBC/ODBC Server (STS)
Kyuubi v.s. Spark Thrift JDBC/ODBC Server (STS) Introductions Barriers to common Spark job usage High Barrier Insecurity Compatibility Bootstrap latency Limitations of Spark ... -
JDBC Connector
JDBC Configuration Semantic EXACTLY_ONCE AT_LEAST_ONCE && NONE Others JDBC read queryFunc to get sql resultFunc process the query data JDBC Read Write Generate target SQL b... -
1. Introduction to the Kyuubi Configurations System
Introduction to the Kyuubi Configurations System Environments Kyuubi Configurations Authentication Backend Delegation Engine Frontend Ha Kinit Metrics Operation Session ... -
9. Distributed services
9.1. Remote service 9.1.1. Remote service. Message flow 9.1.2. Remote service. Fire-and-forget and ack-response modes 9.1.3. Remote service. Asynchronous, Reactive and RxJava3 c... -
7. Distributed collections
7.1. Map 7.1.1. Map eviction, local cache and data partitioning Eviction Local cache How to load data to avoid invalidation messages traffic. Data partitioning 7.1.2. Map pers...
