Je vais construire des pipelines de données ETL Azure Databricks Pyspark et ADF

Certaines informations ont été traduites automatiquement.

Inde

Je parle Anglais, Telugu, Hindi

Ingénieur de données Azure

Je suis un ingénieur de données Azure avec 3 ans d’expérience en Azure Databricks, PySpark, Apache Spark, SQL, Azure Data Factory, ADLS Gen2, Delta Lake, Unity Catalog, Structured Streaming et Azure D...
À propos de ce service

Vous avez besoin d’aide pour construire, améliorer ou dépanner un pipeline de données Azure ? Je peux vous aider à concevoir et mettre en œuvre des solutions d’ingénierie de données fiables en utilisant Azure Databricks, Azure Data Factory, PySpark, SQL, ADLS et Delta Lake.

Fort d’une expérience pratique dans la création de pipelines ETL/ELT, je peux vous assister pour :

Développement et dépannage Azure Databricks

Transformations de données PySpark et optimisation des performances

Requêtes SQL, analyse de données et optimisation des requêtes

Pipeline Azure Data Factory et déplacement de données

Développement de pipelines ETL/ELT

Implémentation et optimisation de Delta Lake

Structured Streaming et traitement par lots

Nettoyage, validation et transformation de données

Architecture Medallion avec couches Bronze, Silver et Gold

Intégration ADLS avec Databricks

Débogage et correction des problèmes existants dans les pipelines

Conception de pipelines de données et diagrammes d’architecture

Je privilégie la compréhension des besoins réels avant de construire une solution. Que vous ayez besoin d’une petite transformation, d’aide pour réparer un pipeline existant ou d’un support pour une tâche d’ingénierie de données plus importante, je fournirai des solutions propres, faciles à maintenir et pratiques.

Veuillez m’envoyer un message avant de passer commande afin que nous puissions discuter de vos besoins.

Langue:

Anglais

Expertise technique:

Apache Spark

Databricks

Expertise:

Pipelines de data

Développement ETL

Secteur:

Analyse de données

Services financiers