-
平台安装介绍
目的和范围 目标受众 系统要求 硬件要求 软件要求 安装前准备 下载&&配置flink 引入MySQL依赖包 下载Apache StreamPark™ 安装 初始化系统数据 查看执行StreamPark元数据SQL文件 连接MySQL数据库 && 执行初始化脚本 查看执行结果 Apache StreamPark™配置 配置mysql... -
All Configurations
Externalized Config File Hudi Table Config Hudi Table Basic Configs Spark Datasource Configs Read Options Write Options PreCommit Validator Configurations Flink Sql Configs ... -
扩/缩容
DolphinScheduler扩容/缩容 文档 1. DolphinScheduler扩容文档 1.1. 基础软件安装(必装项请自行安装) 1.2. 获取安装包 1.3. 创建部署用户 1.4. 修改配置 1.4. 重启集群&验证 2. 缩容 2.1 停止缩容节点上的服务 2.2 修改配置文件 DolphinScheduler扩容/... -
Use Cases
A Streaming Data Lake Near Real-Time Ingestion Incremental Processing Pipelines Unified Batch and Streaming Cloud-Native Tables Schema Management ACID Transactions Efficient ... -
快速上手
配置FLINK_HOME 配置Flink Cluster 服务器启动 flink Standalone Session 配置Flink Cluster 创建作业 主要参数 创建作业 保存作业 构建作业 启动作业 启动检查点设置 提交作业 查看作业状态 通过Apache StreamPark™看板查看 查看原生 flink web u... -
Platform Deployment
Environmental requirements Hadoop Kubernetes Build & Deploy Environmental requirements install streampark Initialize table structure Modify the configurat... -
Apache Kafka Connector
Dependencies Kafka Source (Consumer) example Advanced configuration parameters Consume multiple Kafka instances Consume multiple topics Topic dynamic discovery Consume from t... -
编程模型
架构 编程模型 DataStream Flink Sql TableEnvironment StreamTableEnvironment RunTime Context StreamingContext TableContext StreamTableContext 生命周期 生命周期之 — init 生命周期之 — config 生... -
Flink
Flink节点 综述 Flink 任务类型，用于执行 Flink 程序。对于 Flink 节点： 当程序类型为 Java、Scala 或 Python 时，worker 使用 Flink 命令提交任务 flink run 。更多详情查看 flink cli 。 当程序类型为 SQL 时，worker 使用sql-client.sh 提交任务。... -
Docker 部署
前置条件 1. 安装 docker 2. 安装 docker-compose 部署 Apache StreamPark™ 1. 基于 h2 和 docker-compose 部署 Apache StreamPark™ 2. 部署 3. 配置flink home 4. 配置session集群 5. 提交 Flink 作业 使用已有的 Mysql ...