Je vais concevoir des pipelines de données etl performants avec dbt et airflow

Bonjour, je suis Ted, un ingénieur en infrastructure de données senior avec une vaste expérience dans la création de pipelines ETL et ELT de niveau production pour des environnements de données complexes.

Je me spécialise dans la conception, le développement et l’optimisation de pipelines de données évolutifs en utilisant Python, dbt, Airflow et Snowflake. Au fil des années, j’ai aidé des équipes à passer de processus de données fragmentés à des systèmes fiables, automatisés et économiques.

Ce que je propose :

• des pipelines ETL/ELT personnalisés (Python + SQL) selon les meilleures pratiques
• des modélisations et transformations avancées avec dbt
• l’orchestration avec Airflow et le développement de DAG robustes
• l’architecture Snowflake, le chargement de données et l’optimisation des performances
• les chargements incrémentiels, les règles de qualité des données, la surveillance et la gestion des erreurs
• un code propre, bien documenté, avec un transfert de connaissances fluide

Je me concentre sur la création de pipelines faciles à maintenir, évolutifs et qui réduisent l’effort de maintenance à long terme. Que vous ayez besoin d’un nouveau pipeline, d’une migration vers Snowflake ou d’améliorations majeures de ceux existants, je fournis des solutions de haute qualité, prêtes pour la production, dans les délais.

Envoyez-moi les détails de votre projet et je vous fournirai un périmètre clair et un calendrier précis.