Je vais réparer et optimiser les pipelines de données etl avec airflow ou nifi

Votre pipeline de données est-il peu fiable, lent ou simplement pas encore construit ? Je concevrai et livrerai un pipeline prêt pour la production, adapté à votre architecture.

Ce que je propose :

• Conception et déploiement de pipeline Apache NiFi (Docker ou Kubernetes)
• Développement de DAG Airflow pour la planification, les retries, les alertes et les dépendances
• Jobs ETL PySpark et Spark SQL pour la transformation de données à grande échelle
• Ingestion depuis API REST, SAP OData, S3/MinIO, bases de données et fichiers plats
• Processeurs NiFi personnalisés en Java pour une logique métier complexe

Pourquoi travailler avec moi :

• Plus de 7 ans d’expérience en entreprise dans la création de pipelines pour des clients allemands
• J’ai construit des pipelines traitant des millions d’enregistrements dans des architectures multi-sources complexes
• Chaque livraison inclut la gestion des erreurs, la journalisation et la documentation, pas seulement du code fonctionnel

Je NE fais PAS :

• Des solutions de copie rapide
• Des tutoriels reconditionnés en livrables

Vous n’êtes pas sûr de ce dont vous avez besoin ? Contactez-moi pour une consultation gratuite de 15 minutes sur votre architecture.