Je serai votre ingénieur de données pour les pipelines ETL et le data lakehouse

Des pipelines qui échouent pendant la nuit ? Des rapports qui s'exécutent avec les données d'hier ?

Je crée des pipelines Azure Databricks en production qui s'exécutent selon un calendrier, se remettent des échecs automatiquement et conservent une trace complète des audits.

Je suis un professionnel certifié Databricks et ingénieur de données certifié Azure avec plus de 7 ans d'expérience dans l'assurance, la santé et les services financiers.

Ce que je vais réaliser pour vous :

• pipelines ETL/ELT dans Azure Databricks, ADF et PySpark
• architecture Medallion (Bronze, Silver, Gold) sur Delta Lake
• gouvernance Unity Catalog et suivi de l'historique SCD Type 2
• alertes en cas d'échec, journalisation des audits et reconciliation des données
• planification, CI/CD et documentation de transfert

Projets récents sur Azure Databricks :

• Slide Insurance : passage de données quotidiennes à horaires réguliers sur plus de 900 tables, avec récupération automatique en cas d'échec et alertes avant que de mauvaises données n'atteignent Power BI
• Verto Health : création d'un pipeline basé sur le metadata qui ajoute de nouvelles sources de données hospitalières sans modification de code, avec un historique complet dans Unity Catalog

Comment ça fonctionne :

1. Partagez votre source, votre destination et le nombre de tables
2. Je examine vos données et confirme la portée
3. Je construis, teste et livre un pipeline fonctionnel

Projet plus important ou migration ? Contactez-moi pour un devis personnalisé.