Je développerai des solutions ETL azure databricks pyspark et delta lake
Power BI, Microsoft Fabric et ingénieur Data Azure
À propos de ce service
Ingénieur de données certifié Databricks, spécialisé en développement PySpark et Delta Lake sur Azure Databricks et Microsoft Fabric.
Ce que je peux faire pour vous :
- Transformations PySpark et conversion SQL en PySpark
- Tables Delta Lake, MERGE/upserts et SCD Type 2
- Architecture medallion (bronze, silver, gold) avec vérifications de la qualité des données
- Optimisation des performances des notebooks, jobs et Spark SQL
- Reconciliation pour prouver que vos chiffres correspondent à la source
J'ai travaillé sur une migration d'entreprise vers Azure Databricks et Microsoft Fabric, en gérant la cartographie source-cible, la logique de transformation et la validation des pipelines.
Partagez votre configuration workspace et le problème que vous souhaitez résoudre, je vous fournirai un plan clair avant votre commande.
Outils et plateformes:
Azure Data Factory
FAQ
Traduction automatique
Pouvez-vous travailler dans des notebooks Microsoft Fabric au lieu de Databricks ?
Oui. J'écris du code PySpark et Delta Lake pour Azure Databricks et les notebooks Spark de Microsoft Fabric.
