Apache Airflow

Origine

Airflow è nato nel 2014 presso Airbnb ed è diventato un progetto Apache nel 2016. Orchestrerà complesse pipeline di dati come codice tramite grafi diretti aciclici (DAG).

Vantaggi

Pipeline come codice Python, versionabile
Ampia selezione di operatori
Standard consolidato nel Data Engineering

Svantaggi

Meno adatto per lo streaming rispetto a strumenti specializzati
La scalabilità richiede la scelta dell'Executor (Celery, Kubernetes)

Progetti selezionati

Tutti i progetti

Settore energetico

Base dati per il controllo dei prezzi e degli scenari nella vendita di energia

In un contesto di vendita di energia, è stato supportato lo sviluppo e il funzionamento di una soluzione dati centrale per il controllo dei prezzi, la pianificazione e le analisi di scenario. La soluzione elabora ampi flussi di dati funzionali e tecnici, ne verifica la qualità e li consolida in dati di base affidabili per decisioni operative e a medio termine. Ciò ha incluso la modellazione e l'automazione delle pipeline dati, la fornitura di indicatori chiave rilevanti e la garanzia di una base dati tracciabile per il reporting e il controllo.

Scopri di più

Un progetto con Apache Airflow?

Portiamo esperti qualificati nel vostro progetto. Contattateci.

Richiedi una chiamata