-
项目配置
为什么需要配置 flink option property 基础参数 Memory参数 配置总内存 Table app sql 总结 配置在StreamPark 中是非常重要的概念,先说说为什么需要配置 为什么需要配置 开发DataStream 程序,大体流程都可以抽象为以下4步 StreamExecutionEnvironm... -
Redis Connector
Redis写入依赖 常规方式写 Redis 1.接入source 2. 写入redis Apache StreamPark™ 写入 Redis 1. 配置策略和连接信息 2. 写入Redis 支持的redis操作命令 其他配置 Redis 是一个开源内存数据结构存储系统，它可以用作数据库、缓存和消息中间件。 它支持多种类型的数据结构，如字... -
数据质量
概述 任务类型介绍 注意事项 检查逻辑详解 任务操作指南 单表检查之空值检查 检查介绍 界面操作指南 单表检查之及时性检查 检查介绍 界面操作指南 单表检查之字段长度校验 检查介绍 界面操作指南 单表检查之唯一性校验 检查介绍 界面操作指南 单表检查之正则表达式校验 检查介绍 界面操作指南 单表检查之枚举值校验 检查介绍... -
编程模型
架构 编程模型 DataStream Flink Sql TableEnvironment StreamTableEnvironment RunTime Context StreamingContext TableContext StreamTableContext 生命周期 生命周期之 — init 生命周期之 — config 生... -
告警通知
webapi.conf server.conf 夜莺告警通知，内置支持邮件、钉钉机器人、企微机器人、飞书机器人多种方式作为发送通道，也支持调用自定义脚本和Webhook，给用户自定义发送通道的能力。相关配置在 webapi.conf 和 server.conf 中都有涉及。这里分别讲解。 webapi.conf [[ NotifyChannels ... -
JDBC Connector
JDBC 信息配置 semantic 语义配置 EXACTLY_ONCE AT_LEAST_ONCE && NONE 其他配置 JDBC 读取数据 queryFunc获取一条sql resultFunc 处理查询到的数据 JDBC 读取写入 根据数据流生成目标SQL 设置写入批次大小 多实例 JDBC 支持 手动指定 JDBC 连接信... -
快速开始
关于 GitHub CLI 先决条件 一些有用的命令 查看您的状态 查看存储库 克隆存储库 创建存储库 处理问题 处理拉取请求 使用代码空间 寻求帮助 自定义 GitHub CLI 进一步阅读 关于 GitHub CLI GitHub CLI 是一个开源工具，用于从计算机的命令行使用 GitHub。当您使用命令行工作时，您可以... -
Mtail 日志监控
前言 更新 mtail简介 mtail样例 mtail更多样例 关于时间戳 前言 说到日志监控，大家第一反应的可能是ELK的方案，或者Loki的方案，这两个方案都是把日志采集了发到中心，在中心存储、查看、分析，不过这个方案相对比较重量级一些，如果我们的需求只是从日志中提取一些metrics数据，比如统计一些日志中出现的Error次数之类的，则... -
名词解释
名词解释 模块介绍 在对 Apache DolphinScheduler 了解之前，我们先来认识一下调度系统常用的名词 名词解释 DAG： 全称 Directed Acyclic Graph，简称 DAG。工作流中的 Task 任务以有向无环图的形式组装起来，从入度为零的节点进行拓扑遍历，直到无后继节点为止。举例如下图： 流程定义 ：通过拖... -
创建 GitHub CLI 扩展
关于 GitHub CLI 扩展 使用 gh extension create 创建扩展 使用 gh extension create 在 Go 中创建预编译扩展 使用 gh extension create 创建非 Go 预编译扩展 手动创建扩展 编写解释型 GitHub CLI 扩展的技巧 处理参数和标志 非交互方式调用核心命令 以编...