-
项目配置
为什么需要配置 flink option property 基础参数 Memory参数 配置总内存 Table app sql 总结 配置在StreamPark 中是非常重要的概念,先说说为什么需要配置 为什么需要配置 开发DataStream 程序,大体流程都可以抽象为以下4步 StreamExecutionEnvironm... -
数据质量
概述 任务类型介绍 注意事项 检查逻辑详解 任务操作指南 单表检查之空值检查 检查介绍 界面操作指南 单表检查之及时性检查 检查介绍 界面操作指南 单表检查之字段长度校验 检查介绍 界面操作指南 单表检查之唯一性校验 检查介绍 界面操作指南 单表检查之正则表达式校验 检查介绍 界面操作指南 单表检查之枚举值校验 检查介绍... -
Apache Hudi Stack
Lake Storage File Formats Transactional Database Layer Table Format Indexes Table Services Clustering Compaction Cleaning Indexing Concurrency Control Lake Cache* Metase... -
9. Distributed services
9.1. Remote service 9.1.1. Remote service. Message flow 9.1.2. Remote service. Fire-and-forget and ack-response modes 9.1.3. Remote service. Asynchronous, Reactive and RxJava3 c... -
Apache Kafka Connector
Dependencies Kafka Source (Consumer) example Advanced configuration parameters Consume multiple Kafka instances Consume multiple topics Topic dynamic discovery Consume from t... -
In-depth Installation
Hardware Network Download Tarball Dependencies Configuration Configure accumulo-env.sh Native Map Building Native Maps Configuration Cluster Specification Configure accumu... -
7. Distributed collections
7.1. Map 7.1.1. Map eviction, local cache and data partitioning Eviction Local cache How to load data to avoid invalidation messages traffic. Data partitioning 7.1.2. Map pers... -
Flink
Flink节点 综述 Flink 任务类型，用于执行 Flink 程序。对于 Flink 节点： 当程序类型为 Java、Scala 或 Python 时，worker 使用 Flink 命令提交任务 flink run 。更多详情查看 flink cli 。 当程序类型为 SQL 时，worker 使用sql-client.sh 提交任务。... -
3. Integration with Hive Metastore
Integration with Hive Metastore Requirements Default Behavior Related Configurations Remote Metastore Database Remote Metastore Server Activate Configurations Via kyuubi-defau... -
编程模型
架构 编程模型 DataStream Flink Sql TableEnvironment StreamTableEnvironment RunTime Context StreamingContext TableContext StreamTableContext 生命周期 生命周期之 — init 生命周期之 — config 生...