Orchestrer des pipelines de données dbt avec airflow.

Tour des possibilités de la lib python DLT.
Cette lib permet d'écrire des pipelines d'ingestions de données.

Elements de reflexion autour de l'utilisation de Airflow

Ressources sur dbt

Dépot example d'utilisation de dbt

Doc pour utiliser les outils UNIX pour faire de la manipulation de données.

Création d'un datalake avec duckDB sur Dagster.
Illustration de l'utilisation de duckdb et de la façon de manipuler cette lib en python.