本当に素晴らしい講義です。Airflowを初めて学ぶ方は必見です！！！

sdlee0746

本講義は、Apache Airflowの核心的なメカニズムからDAG、Operator、Hook、Scheduling、Timezone、冪等性、Templateまで、詳細な理論と実習で構成されています。Airflowが「なぜこのように動作するのか」を理解し、自らデータパイプラインを設計・デバッグできるようになることを目指す、実践中心のAirflowマスターコースです。

dooleyz3525

Airflow完全ガイド - Part 1

わあ、初めての受講レビューに、高い評価までいただき本当にありがとうございます ^^

apache-airflow

Data Engineering

데이터 엔지니어링

datapipeline

입문

초급

중급이상

airflow

orchestration

講義紹介および実習環境の構築

Airflowの基本 - DAG、タスク、依存関係、XCom

Airflowの基本 - TaskFlow API、リトライ (retries)、クリア (Clear)、コンテキスト (Context)、シリアル化 (Serialization)

OperatorとHookの扱い - Bash, HTTP

OperatorとHookの扱い - SQL(MySQL, PostgreSQL)

OperatorとHookの扱い - S3(MinIO)

Scheduling - Intervalベース、タイムゾーン、冪等性の設計

Scheduling - catchup, backfill, Cron, Timetable, Point-in-Timeベース

テンプレーティング

おわりに...