• 首页
• 核心概念

核心概念

在这里，您可以找到关于Apache Airflow®每个核心概念的详细文档及其使用方法，以及高层次的架构概览。

架构

• 架构概述
  • Airflow 组件
  • 部署Airflow组件
  • 架构图
  • 工作负载
  • 控制流
  • 用户界面

工作负载

• DAGs
  • 声明一个DAG
  • 加载DAGs
  • 运行中的DAGs
  • DAG 分配
  • 默认参数
  • DAG装饰器
  • 控制流
  • 动态DAGs
  • DAG 可视化
  • DAG & 任务文档
  • 子DAG
  • TaskGroups vs SubDAGs
  • 打包DAG
  • .airflowignore
  • DAG 依赖关系
  • DAG 暂停、停用和删除
  • DAG自动暂停(实验性功能)
• DAG运行记录
  • DAG 运行状态
  • 重新运行DAG
  • 外部触发器
  • 注意事项
• 任务
  • 关系
  • 任务实例
  • 超时设置
  • SLAs
  • 特殊异常
  • 僵尸/未完成任务
  • 执行器配置
• 操作符
  • Jinja模板引擎
  • Reserved params keyword
• Sensors
• TaskFlow
  • Context
  • 日志记录
  • 传递任意对象作为参数
  • 传感器与TaskFlow API
  • 历史记录
• Executor
  • 执行器类型
  • 同时使用多个执行器
  • 编写您自己的执行器
• 认证管理器
  • 为什么需要可插拔的认证管理器？
  • 编写您自己的认证管理器
• 对象存储
  • 云对象存储并非真正的文件系统
  • 基本用法
  • 配置
  • Path API
  • 扩展
  • 复制与移动
  • 外部集成

通信

• XComs
  • 对象存储XCom后端
  • 自定义XCom后端
  • 验证容器中自定义XCom后端的使用
• 变量
• 参数
  • DAG级参数
  • 任务级别参数
  • 在任务中引用参数
  • JSON Schema Validation
  • 使用参数提供触发器UI表单
  • 禁用运行时参数修改

调试

• 调试 Airflow DAG

上一页 下一步

这篇内容对您有帮助吗？