Je vais concevoir une solution d'ingénierie des données cloud sur Azure

Je conçois et mets en œuvre des solutions d’ingénierie des données Azure de niveau production, des pipelines ETL évolutifs et des architectures Lakehouse modernes.

Fort de plus de 8 ans d’expérience en entreprise, j’aide les sociétés à migrer, moderniser et optimiser leurs plateformes de données cloud en utilisant les technologies Microsoft.

Mes compétences principales

Azure Data Factory

• Pipeline ETL/ELT complexes
• Orchestration et déclencheurs
• Chargements incrémentiels et logique CDC
• Gestion des erreurs et surveillance

Microsoft Fabric

• Architecture analytique de bout en bout
• Mise en place de Lakehouse et Warehouse
• Modèles sémantiques
• Optimisation des performances

Azure Databricks

• Transformations PySpark
• Architecture Delta Lake
• Mise en œuvre Bronze / Silver / Gold
• Partitionnement et optimisation Z-order
• Dimensionnement des clusters et ajustement des coûts

SQL et modélisation des données

• Transformations SQL avancées
• Modélisation dimensionnelle
• Conception de schémas en étoile
• Optimisation des requêtes

Python

• Traitement de données évolutif
• Intégration d’API
• Automatisation et validation des données

Ce que je réalise

• Workflows Azure Data Factory
• Architectures Lakehouse avec Databricks
• Entrepôts de données cloud modernes
• Systèmes d’ingestion basés sur API
• Migration de l’on-premise vers Azure
• Plateformes de données prêtes pour l’entreprise

Résultats sélectionnés

• Optimisation des workloads Spark, réduction du temps d’exécution de 60 %
• Conception de processus pour la plateforme Lakehouse