Je serai votre expert Apache Airflow pour ETL, DAGs et automatisation de workflow avec Python
Ingénieur en données et analyses
Niveau 1
Répond à certains critères de performance et présente un fort potentiel sur la place de marché.
À propos de ce service
Expert Apache Airflow pour vos besoins de projet
Vous cherchez des experts en Airflow ? J’aide les organisations à automatiser et optimiser leurs flux de données en utilisant Apache Airflow sur AWS, Azure et GCP. Avec plus de 2 ans d’expérience en entreprise et plus de 30 projets d’ingénierie des données réalisés, je construis des pipelines fiables et évolutifs qui soutiennent les équipes d’analyse, de reporting et de machine learning.
Services proposés :
- Planification et consultation de projet pour Airflow sur AWS, Azure et GCP : Comprendre vos besoins et concevoir la bonne orchestration.
- Développement de DAG et pipelines Airflow : Création de workflows ETL/ELT, planification, dépendances, surveillance et automatisation.
- Transmission, nettoyage et traitement des données : Garantir précision, qualité et efficacité dans tous les flux de données.
- Intégration avec des entrepôts de données : Incluant Amazon Redshift, Snowflake, BigQuery, Databricks Lakehouse et Azure Synapse.
- Gestion complète des workflows de données : De l’ingestion à la transformation, en utilisant Airflow, Python, SQL, PySpark, Kafka et services cloud natifs.
Pourquoi me choisir :
- Forte expertise cloud sur AWS, Azure et GCP.
- Compétent en Python, SQL, NoSQL, PySpark, Kafka et Spark pour le traitement des données.
Mon portfolio
FAQ
Traduction automatique
De quoi avez-vous besoin de ma part pour commencer ?
J’ai besoin d’accéder à votre environnement (AWS, Azure, GCP ou local), des détails sur vos sources de données, les étapes du workflow requises, ainsi que tout script ou documentation existant.
Pouvez-vous travailler avec ma configuration Airflow existante ?
Oui. Je peux revoir, corriger, optimiser ou étendre votre environnement Airflow actuel, y compris MWAA, Composer et Airflow auto-hébergé.
Supportez-vous plusieurs plateformes cloud ?
Oui. Je travaille avec AWS, Azure et GCP et peux créer des pipelines Airflow intégrant Redshift, Snowflake, Databricks, BigQuery, Synapse et autres services.
Pouvez-vous intégrer des outils externes dans Airflow ?
Oui. Je travaille avec des scripts Python, APIs, Spark, PySpark, Kafka, bases de données SQL, systèmes de stockage cloud et entrepôts de données.
Allez-vous documenter les workflows que vous créez ?
Oui. Tous les pipelines sont accompagnés d’une documentation claire expliquant le fonctionnement des DAG, comment les exécuter et comment les mettre à jour.
Proposez-vous un support pour le déploiement et la production ?
Oui. Je peux déployer des workflows Airflow en production et aider à la planification, la surveillance et l’optimisation des performances.
Pouvez-vous signer un NDA ?
Oui. Je suis disposé à signer un NDA si votre projet nécessite de la confidentialité.
Que faire si j'ai besoin d'une assistance ou de mises à jour continues ?
Je propose un support continu en tant que service supplémentaire. Vous pouvez commander un travail personnalisé ou un forfait de maintenance mensuelle.

