Je vais construire des pipelines ETL et data pipelines avec azure data factory

Certaines informations ont été traduites automatiquement.

Inde

Je parle Hindi, Anglais

Ingénieur de données Azure

Je suis un ingénieur de données Azure avec une expérience dans la conception et le développement de pipelines ETL/ELT évolutifs utilisant Azure Data Factory, Databricks, PySpark et SQL. Je me spéciali...
À propos de ce service

Vous cherchez de l’aide pour construire, réparer ou optimiser un pipeline Azure Data Factory ?

Je propose des solutions d’ingénierie des données Azure pour l’ingestion, la transformation et le traitement des données en utilisant Azure Data Factory, Azure Data Lake Storage, Azure Databricks, PySpark, SQL et Delta Lake.

Les services incluent :

  • Développement de pipelines Azure Data Factory
  • Ingestion depuis SQL Server/CSV/API vers Azure
  • Intégration ADLS Gen2
  • Chargement complet et incrémentiel des données
  • Ingestion basée sur le watermark
  • Transformations avec Azure Databricks et PySpark
  • Implémentation de Delta Lake MERGE/upsert
  • Débogage de pipelines et gestion des erreurs
  • Pipeline paramétrés et pilotés par métadonnées
  • Optimisation des performances

Je me concentre sur la création de pipelines de données fiables et faciles à maintenir selon vos besoins.

N’hésitez pas à me contacter avant de commander si vous avez une demande complexe ou personnalisée en ingénierie des données Azure.

Langue:

Anglais

•

Hindi

Expertise technique:

Apache Spark

•

Databricks

•

Snowflake

Expertise:

Pipelines de data

•

Développement ETL

Secteur:

Analyse de données

Mon portfolio