-
Platform Deployment
Environmental requirements Hadoop Kubernetes Build & Deploy Environmental requirements install streampark Initialize table structure Modify the configurat... -
平台安装介绍
目的和范围 目标受众 系统要求 硬件要求 软件要求 安装前准备 下载&&配置flink 引入MySQL依赖包 下载Apache StreamPark™ 安装 初始化系统数据 查看执行StreamPark元数据SQL文件 连接MySQL数据库 && 执行初始化脚本 查看执行结果 Apache StreamPark™配置 配置mysql... -
Redis Connector
Redis写入依赖 常规方式写 Redis 1.接入source 2. 写入redis Apache StreamPark™ 写入 Redis 1. 配置策略和连接信息 2. 写入Redis 支持的redis操作命令 其他配置 Redis 是一个开源内存数据结构存储系统，它可以用作数据库、缓存和消息中间件。 它支持多种类型的数据结构，如字... -
项目配置
为什么需要配置 flink option property 基础参数 Memory参数 配置总内存 Table app sql 总结 配置在StreamPark 中是非常重要的概念,先说说为什么需要配置 为什么需要配置 开发DataStream 程序,大体流程都可以抽象为以下4步 StreamExecutionEnvironm... -
快速上手
配置FLINK_HOME 配置Flink Cluster 服务器启动 flink Standalone Session 配置Flink Cluster 创建作业 主要参数 创建作业 保存作业 构建作业 启动作业 启动检查点设置 提交作业 查看作业状态 通过Apache StreamPark™看板查看 查看原生 flink web u... -
MongoDB CDC
Support Those Engines Key Features Description Supported DataSource Info Availability Settings Data Type Mapping Source Options Tips: How to Create a MongoDB CDC Data Synch... -
Apache Hudi Stack
Lake Storage File Formats Transactional Database Layer Table Format Indexes Table Services Clustering Compaction Cleaning Indexing Concurrency Control Lake Cache* Metase... -
Apache Kafka Connector
Dependencies Kafka Source (Consumer) example Advanced configuration parameters Consume multiple Kafka instances Consume multiple topics Topic dynamic discovery Consume from t... -
扩/缩容
DolphinScheduler扩容/缩容 文档 1. DolphinScheduler扩容文档 1.1. 基础软件安装(必装项请自行安装) 1.2. 获取安装包 1.3. 创建部署用户 1.4. 修改配置 1.4. 重启集群&验证 2. 缩容 2.1 停止缩容节点上的服务 2.2 修改配置文件 DolphinScheduler扩容/... -
Flink
Flink节点 综述 Flink 任务类型，用于执行 Flink 程序。对于 Flink 节点： 当程序类型为 Java、Scala 或 Python 时，worker 使用 Flink 命令提交任务 flink run 。更多详情查看 flink cli 。 当程序类型为 SQL 时，worker 使用sql-client.sh 提交任务。...