Devlive 开源社区 本次搜索耗时 0.124 秒,为您找到 1878 个相关结果.
  • 简介

    Apache DolphinScheduler 是一个分布式易扩展的可视化DAG工作流任务调度开源系统。适用于企业级场景,提供了一个可视化操作任务、工作流和全生命周期数据处理过程的解决方案。 Apache DolphinScheduler 旨在解决复杂的大数据任务依赖关系,并为应用程序提供数据和各种 OPS 编排中的关系。 解决数据研发ETL依赖错综复杂...
  • Getting Started

    3364 2024-06-29 《Apache Iceberg 1.5.2》
    Using Iceberg in Spark 3 Adding catalogs Creating a table Writing Reading Next steps The latest version of Iceberg is 1.5.2 . Spark is currently the most feature-rich compu...
  • Flink on K8s

    Environments requirement Preparation for integration configuration for connecting Kubernetes configuration for coKubernetes RBAC Configuration for remote Docker service Job s...
  • Config File Encryption And Decryption

    Introduction How to use How to implement user-defined encryption and decryption Introduction In most production environments, sensitive configuration items such as passwords a...
  • Maintenance

    3351 2024-06-29 《Apache Iceberg 1.5.2》
    Recommended Maintenance Expire Snapshots Remove old metadata files Delete orphan files Optional Maintenance Compact data files Rewrite manifests Maintenance operations req...
  • Authorizations

    3347 2024-06-22 《Apache Accumulo 2.x》
    Configuration Security Labels Writing labeled data Security Label Expression Syntax User Authorizations Advanced Authorizations Handling In Accumulo, data is written with se...
  • Configuration

    3347 2024-06-29 《Apache Iceberg 1.5.2》
    Table properties Read properties Write properties Table behavior properties Reserved table properties Compatibility flags Catalog properties Lock catalog properties Hadoop ...
  • AWS Datasync

    DataSync 节点 综述 创建任务 任务样例 独有参数 环境配置 DataSync 节点 综述 AWS DataSync 是一种在线数据传输服务,可简化、自动化和加速本地存储系统和 AWS Storage 服务之间,以及不同 AWS Storage 服务之间的数据移动。 DataSync 支持的组件: Network File ...
  • 文件参数传递

    文件参数 使用方式 配置文件参数 输出文件给下游任务 获取上游任务的文件 其他 备注 样例 文件参数 通过配置文件参数,在同一工作流实例中,可以将上游任务工作目录下的文件(或文件夹,下统一以文件 代替)传递给下游任务。 如以下场景可能使用到 在ETL任务中,将多个上游任务处理好的数据文件一起传递给特定的下游任务。 在机器学习场景中,将...
  • Installation

    3334 2024-05-20 《Apache Answer 1.3.0》
    Start Answer Install steps Step 1: Choose the language Step 2: Config database Step 3: Create configuration file Step 4: Fill in basic information Step 5: Complete Start A...