Je vais construire des pipelines de données AWS et snowflake

Vous avez du mal avec des données dispersées, des rapports manuels ou un traitement lent des données ? Je peux vous aider à automatiser et à faire évoluer votre infrastructure de données.

Je suis un ingénieur en données cloud spécialisé dans la création de pipelines de données sécurisés, robustes et évolutifs. Que vous ayez besoin d’un processus ETL batch simple ou d’une architecture complexe de streaming d’événements en temps réel, je peux concevoir et déployer la solution idéale adaptée à vos besoins.

Mes compétences et services incluent :

• pipelines de bout en bout : flux de travail ETL/ELT automatisés avec Python, SQL et Apache Airflow.
• streaming en temps réel : configuration d’Apache Kafka (MSK/KRaft) pour les données IoT ou d’événements en temps réel.
• entrepôts de données cloud : structuration et optimisation des données dans Snowflake et AWS.
• extraction et scraping de données : extraction de données web avec Selenium et API.
• transformations et visualisation : utilisation de dbt pour la modélisation des données et Streamlit pour des tableaux de bord interactifs.
• infrastructure et déploiement : conteneurisation d’applications avec Docker et déploiement sur AWS EC2.

Pourquoi me choisir ?

• Je fournis un code propre, commenté et facile à comprendre.
• Je propose des diagrammes d’architecture professionnels pour vos pipelines.
• Je livre une documentation claire pour des transferts faciles.

Note : chaque projet de données est unique. Veuillez m’envoyer un message