Je construirai et optimiserai vos pipelines ETL et flux de travail d'intégration de données
Une plateforme unique pour les solutions de données
À propos de ce service
De mauvais pipelines ne vous ralentissent pas seulement, ils brisent la confiance dans vos données. Je suis un ingénieur data senior avec plus de 6 ans d'expérience dans la construction de pipelines ETL en production et de flux d'intégration de données pour des startups et des scale-ups, notamment Delivery Hero (Berlin).
Je concevrai et construirai votre pipeline de bout en bout, de l'ingestion à la destination, propre, fiable et facile à maintenir par votre équipe.
Ce que je fournis :
- Conception et mise en œuvre de pipelines ETL
- Ingestion de données multi-sources (API, bases de données, fichiers plats)
- Transformation et validation des données
- Orchestration de workflows (Airflow, Kestra)
- Configurations cloud natives (AWS : Athena, Redshift, S3 · GCP : BigQuery, Dataflow)
- Gestion des erreurs, journalisation et surveillance de base
- Documentation de transfert
Avant de commencer, je définirai clairement le périmètre du travail pour éviter toute surprise concernant le délai ou les livrables. Pour des projets plus importants ou en cours, des offres personnalisées sont disponibles.
Outils : Python, SQL, Apache Airflow, Kestra, AWS (Athena, Redshift, S3), GCP (BigQuery, Dataflow), PostgreSQL, dbt
