Je vais construire et optimiser des pipelines de données etl sur AWS ou azure en utilisant pyspark

Vous avez besoin de pipelines de données fiables sans embaucher un ingénieur à plein temps ?

Je suis un ingénieur en données avec près de 5 ans d’expérience sur AWS et Azure, actuellement dans une fintech réglementée. Certifié AWS Data Engineer - Associate.

Ce que je peux faire pour vous :

• Construire des pipelines ETL/ELT avec PySpark, Python et SQL
• - AWS : Glue, Lambda, S3, Redshift, Athena
• - Azure : Data Factory, Synapse, Databricks, plus Snowflake
• - Migrer des données depuis des systèmes legacy ou des fichiers vers un entrepôt cloud
• - Accélérer des requêtes et pipelines lents (j’ai réalisé des gains de 30-40%)
• - Ajouter des contrôles de qualité des données pour que de mauvaises données n’atteignent jamais vos rapports
• - Orchestrer avec Airflow ou ADF

Notre méthode : vous partagez l’accès ou un échantillon de données, je vous envoie un plan succinct, je le construis, puis je vous remets un code fonctionnel accompagné de la documentation.

Veuillez m’envoyer un message avant de commander pour que je puisse confirmer le périmètre.