Data
Apache Airflow
Ursprung
Airflow uppstod 2014 hos Airbnb och blev ett Apache-projekt 2016. Det orkestrerar komplexa datapiplines som kod via riktade acykliska grafer (DAGs).
Fördelar
- Pipelines som Python-kod, versionerbara
- Stort urval av operatörer
- Etablerad standard inom Data Engineering
Nackdelar
- Mindre lämplig för strömning än specialiserade verktyg
- Skalning kräver val av executor (Celery, Kubernetes)