Il semble que ce service ait été suspendu
Je vais créer des dags airflow et des workflows pyspark pour pipelines ETL
Pakistan
Ingénieur de données, PySpark, Airflow, ETL ELT, Databricks, Azure, AWS
À propos de ce service
Expert en ingénierie de données avec Airflow & PySpark pour vos projets
Vous souhaitez automatiser vos flux de données, construire des pipelines fiables et exploiter les insights des données brutes ? Je suis là pour vous aider ! Avec une expérience pratique en ingénierie de données moderne et plusieurs projets réussis, je me spécialise dans la création de solutions de données efficaces, évolutives et prêtes pour la production.
Services proposés
- Développement de pipelines de données avec Apache Airflow & PySpark
- Workflows ETL / ELT : extraction, transformation, chargement avec Spark
- Nettoyage et traitement des données : transformations par lots évolutives
- Orchestration de pipelines : planification, retries, journalisation, alertes
- Intégration cloud : AWS/S3 ou environnements basés sur Docker
- Planification de projets & consultation technique
Pourquoi me choisir ?
- Spécialiste en Airflow & PySpark : expertise solide en outils modernes d’ingénierie de données
- Workflows efficaces et automatisés : pipelines optimisés, fiables et évolutifs
- Code propre + documentation : structure claire et conception maintenable
- Compétences techniques solides : Python, Spark, Airflow, Docker, stockage cloud
- Livraison professionnelle : je peux travailler de manière indépendante ou collaborer avec votre équipe
FAQ
Traduction automatique
De quoi avez-vous besoin de ma part pour commencer ?
J’ai besoin d’une brève description de vos sources de données, du workflow souhaité, des formats de fichiers, ainsi que des outils ou environnements que vous utilisez déjà (configuration Airflow, cluster Spark, S3/MinIO, etc.).
Configurez-vous Airflow ou Spark à partir de zéro ?
Oui ! Je peux configurer Airflow et PySpark localement ou en utilisant Docker. Si vous avez déjà un environnement, je peux y intégrer mon travail.
Allez-vous documenter le pipeline ?
Oui, chaque package inclut une documentation claire et facile à comprendre. La version premium comprend également un diagramme d’architecture.
Pouvez-vous maintenir ou mettre à jour des pipelines existants ?
Oui, je peux optimiser, refactoriser ou étendre vos dags airflow et workflows pyspark existants.

