Je vais construire des pipelines de données en utilisant pyspark, databricks, sql, snowflake et AWS

À propos de cette offre

Construisez des pipelines de données évolutifs, fiables et performants avec un ingénieur en données expérimenté.

Vous avez du mal avec des transformations de données complexes, des requêtes SQL lentes, des échecs de pipeline ou l'intégration de données dans le cloud ? Je peux vous aider à concevoir, développer, déboguer et optimiser des solutions d'ingénierie des données qui rendent vos flux de travail plus efficaces et fiables.

Avec plus de 8 ans d'expérience dans le domaine de l'ingénierie des données, travaillant avec des entreprises multinationales (MNCs) et une grande société de conseil du Big Four, j'ai de l'expérience dans la livraison de solutions de données dans des environnements de produits rapides et des projets d'entreprise.

Je me spécialise dans la transformation de données brutes en ensembles de données structurés et prêts pour l'analyse en utilisant des outils modernes d'ingénierie des données et des technologies cloud.

Ce que je peux vous aider à faire

• Développement ETL/ELT : Construire et maintenir des pipelines de données fiables pour le traitement par lots et l'intégration de données.
• PySpark & Databricks : Développer des transformations de données, optimiser les jobs Spark et traiter efficacement de grands ensembles de données.
• Développement SQL : Rédiger des requêtes SQL complexes, résoudre des erreurs, optimiser la performance des requêtes et transformer des données.
• Snowflake : Développer des workflows de transformation de données, optimiser les requêtes et construire des solutions de données cloud.