-
Gobblin on Yarn
Introduction Architecture Overview The Role of Apache Helix Gobblin Yarn Application Launcher YarnAppSecurityManager LogCopier Gobblin ApplicationMaster YarnService GobblinH... -
Streaming Reads
Spark Streaming Spark Streaming Structured Streaming reads are based on Hudi’s Incremental Query feature, therefore streaming read can return data for which commits and base fil... -
Gobblin CLI
Gobblin Commands & Execution Modes Gobblin Commands The Distcp Quick App The OneShot Quick App Developing quick apps for the CLI Implementing new Gobblin commands Gobblin Ser... -
JVM 监控
进程级监控 埋点方式 本讲介绍JVM监控相关知识。 进程级监控 Java类的程序，如果只是监控端口存活性，可以直接使用 Categraf 的 net_response 插件，如果只是监控进程存活性，以及进程的CPU、内存等使用率，这个和C的程序、Go的程序没有本质区别，使用 Categraf 的 procstat 插件。 procstat 插... -
第一章：多线程入门
学习目标 1. 什么是线程与多线程 1.1 线程的概念 1.2 多线程的概念 2. 为什么需要多线程编程 2.1 提高CPU利用率 2.2 提高程序响应性 2.3 更好的资源利用 2.4 简化复杂问题的处理 3. Java中实现多线程的两种基本方式 3.1 继承Thread类 3.2 实现Runnable接口 3.3 两种方式的比较 ... -
Publishing Data to S3
Introduction Hadoop and S3 The s3a File System The s3 File System Getting Gobblin to Publish to S3 Signing Up For AWS Setting Up EC2 Launching an EC2 Instance EC2 Package I... -
第三章：线程的基本操作
学习目标 1. 线程启动(start)、休眠(sleep)、中断(interrupt) 1.1 线程启动(start) 1.2 线程休眠(sleep) 1.3 线程中断(interrupt) 2. 线程Join操作及其应用场景 2.1 Join操作的典型应用场景 3. 线程优先级的设置与影响 4. 守护线程(Daemon Thread)的应用... -
Configuration
Configuration Table properties Iceberg tables support table properties to configure table behavior, like the default split size for readers. Read properties Property Defaul... -
Java API
Iceberg Java API Tables The main purpose of the Iceberg API is to manage table metadata, like schema, partition spec, metadata, and data files that store table data. Table metad... -
第四章：线程安全问题
学习目标 1. 什么是线程安全 1.1 线程安全的定义 1.2 线程安全的重要性 2. 共享资源访问的竞态条件 2.1 什么是竞态条件 2.2 竞态条件示例 2.3 竞态条件的类型 读-改-写竞态条件 检查再执行竞态条件 3. 线程安全问题的表现形式 3.1 原子性问题 3.2 可见性问题 3.3 有序性问题 4. 实战案例：商品...
