Je vais construire des pipelines ETL avec Python, SQL, Airflow et PySpark

Vous avez besoin d'automatiser l'extraction, la transformation et le chargement (ETL) des données ?

Je suis un Data Engineer avec plus de 4 ans d'expérience dans la création de pipelines ETL/ELT évolutifs pour l’analyse, le reporting et l’entreposage de données. Je peux vous aider à concevoir, développer, optimiser et automatiser vos flux de données en utilisant des outils modernes d’ingénierie des données et les meilleures pratiques.

Services :

• Développement de pipelines ETL/ELT
• Extraction de données depuis API, bases de données et fichiers
• Nettoyage et transformation de données
• Développement et optimisation SQL
• Automatisation de workflows avec Apache Airflow
• Traitement de données avec PySpark
• Chargement dans l’entrepôt de données
• Intégration de données dans le cloud
• Surveillance et dépannage des pipelines
• Documentation et support au déploiement

Outils et technologies :

• Python
• SQL
• Apache Airflow
• PySpark
• Databricks
• Azure Data Factory
• PostgreSQL
• MySQL
• Snowflake
• BigQuery

Pourquoi me choisir ?

• Plus de 4 ans d’expérience en ingénierie des données
• Solutions propres, évolutives et prêtes pour la production
• Code bien documenté
• Communication rapide
• Livraison à temps

Veuillez me contacter avant de passer commande afin que je puisse examiner vos besoins et recommander la meilleure solution.