-
伪集群部署(Pseudo-Cluster)
伪集群部署 前置准备工作 准备 DolphinScheduler 启动环境 配置用户免密及权限 配置机器 SSH 免密登陆 启动 zookeeper 修改相关配置 修改 install_env.sh 文件 修改 dolphinscheduler_env.sh 文件 初始化数据库 启动 DolphinScheduler 登录 Dolph... -
安装部署
环境要求 Hadoop Kubernetes 安装 初始化表结构 修改配置 修改连接信息 修改workspace 启动 系统登录 系统配置 System Setting Alert Setting Flink Home Flink Cluster StreamPark 总体组件栈架构如下， 由 streampark-core ... -
Clickhouse Connector
JDBC 同步写入 常规方式写入 Apache StreamPark™ 方式写入 配置信息 写入clickhouse HTTP 异步写入 常规方式写入 Apache StreamPark™ 方式写入 异步写入配置及失败恢复组件配置 写入clickhouse 其他配置 ClickHouse 是一个用于联机分析（OLAP）的列式数据库管... -
部署参数分析
Dolphin Scheduler目录配置文件解读 bin conf common目录 config目录 alert.properties application-api.properties application-dao.properties master.properties worker.properties Zookeeper.p... -
All Configurations
Externalized Config File Hudi Table Config Hudi Table Basic Configs Spark Datasource Configs Read Options Write Options PreCommit Validator Configurations Flink Sql Configs ... -
JDBC Connector
JDBC Configuration Semantic EXACTLY_ONCE AT_LEAST_ONCE && NONE Others JDBC read queryFunc to get sql resultFunc process the query data JDBC Read Write Generate target SQL b... -
集群部署(Cluster)
1.1 : 基础软件安装(必装项请自行安装) 1.2 : 下载后端tar.gz包 1.3：创建部署用户和hosts映射 1.4 : 配置hosts映射和ssh打通及修改目录权限 1.5 : 数据库初始化 1.6 : 修改运行参数 1.7 : 执行install.sh部署脚本 1.8 ： 登录系统 1.2.1之前DolphinSchedule... -
Alerts and Reports
Requirements Commons In your superset_config.py or superset_config_docker.py Disable dry-run mode In your Dockerfile Slack integration Kubernetes-specific Docker Compose s... -
Apache Kafka Connector
依赖 Kafka Source (Consumer) 基础消费示例 高级配置参数 消费多个Kafka实例 消费多个Topic Topic 发现 配置开始消费的位置 指定分区Offset 指定deserializer 返回记录KafkaRecord 指定strategy Kafka Sink (Producer) 容错和语义 多实例k... -
认证方式
认证方式 修改认证方式 开发者LDAP测试 通过 Casdoor 实现 SSO 登录 步骤1. 部署 Casdoor 步骤2. 配置 Casdoor 步骤3. 配置 Dolphinscheduler 通过OAuth2授权认证登录 步骤1. 获取OAuth2客户端凭据 步骤2. 在api的配置文件中开启oauth2登录 步骤3.使用oauth2...
