教程演示🔗
你会学到什么
-
从头开始通过适当的动手示例全面了解 Apache Airflow。
-
从 Airflow 核心命名法的实施开始——DAG、Operators、Tasks、Executors、Cfg 文件、UI 视图等。
-
ADVANCE Airflow 的概念，即使在 Airflow 的官方文档中也没有解释清楚。
-
XComs、挂钩、池、SubDAG、变量、连接、插件、临时查询、分支、传感器等等……
-
独家功能 – 数据分析、图表、触发规则、airflowignore 文件、Zombies、Undeads、LatestOnly 运算符。
-
使用 Apache Airflow 创建实时案例研究的数据管道。
-
了解实时气流项目中要遵循的最佳实践/注意事项。
-
代码和数据集在资源选项卡中可用。
要求
-
Python 的非常基本的知识将是一个附加组件。
-
本课程涵盖了关于 Airflow 的所有内容，并逐行解释。
描述
“Apache Airflow 是一个由社区创建的平台，用于以编程方式创作、安排和监控工作流程。”
Airflow 将改变调度数据管道的方式，这也是它成为 Apache 顶级项目的原因。事实上，它已经被大众公司采用。
课程包括什么？
- 完整的 Apache Airflow 概念从Scratch 到 ADVANCE 的解释与实时实现。
- 每一个 Airflow 概念都通过 实践示例进行了解释。
- 包括 Airflow 的每一个细节，甚至细节。
- XComs、挂钩、池、SubDAG、变量、连接、插件、即席查询、传感器等等……
- 甚至包括那些概念，即使在 Apache Airflow 的官方文档中，对这些概念的解释也不是很清楚。
- 独家功能–数据分析、图表、触发规则、airflowignore 文件、Zombies、Undeads、LatestOnly 运算符。
- 了解实时气流项目中要遵循的最佳实践/注意事项。
- 使用 Airflow 构建实时案例研究的数据管道。
- 完成本课程后，您可以满怀信心地开始从事任何 Airflow 项目。
附加组件
- 问题和查询将很快得到答复。
- 为方便起见，课程中附有讲座中使用的 Airflow 代码和数据集。
- 我会经常更新它，每次都会添加 Airflow 的新组件。
本课程适合谁：
- 希望在公司项目中使用 Airflow 部署管道的数据工程师。
- 想要从传统调度程序（Oozie、Luigi 等）转行的工程师
- 经验丰富的技术人员，想在简历中添加一项热门且要求苛刻的技术。
声明：本站所有文章，如无特殊说明或标注，均为本站发布。任何个人或组织，在未征得本站同意时，禁止复制、盗用、采集、发布本站内容到任何网站、书籍等各类媒体平台。如若本站内容侵犯了原著者的合法权益，可联系我们进行处理。
