Je vais concevoir et automatiser vos pipelines de données etl en python et sql

Bienvenue ! Je suis un ingénieur en données spécialisé dans la création de pipelines ETL/ELT robustes et automatisés en utilisant Python et SQL.

Que vous ayez besoin d’extraire des données à partir d’API complexes ou de construire une infrastructure de base de données propre, je suis là pour vous aider.

Ce que je peux faire pour vous :

• Ingestion d’API et de fichiers : Extraire des données de REST APIs, Webhooks, CSV ou JSON.
• Architecture Medallion : Structurer vos données en couches Bronze (brutes), Silver (nettoyées) et Gold (prêtes pour l’analyse).
• Pipeline ETL personnalisé : Transformation avancée des données, validation du schéma et gestion des erreurs en Python.
• Optimisation de bases de données : Concevoir et optimiser PostgreSQL, SQLite ou MySQL pour de hautes performances.
• Automatisation : Mettre en place des scripts automatisés et des cron jobs pour exécuter les pipelines sans intervention.

Ma stack technologique :

• Langage : Python (Pandas, Requests, SQLAlchemy)
• Bases de données : PostgreSQL, SQLite, MySQL
• Architecture : Medallion, schéma étoile/snowflake

Pourquoi travailler avec moi ?

Je conçois des workflows de données propres, faciles à maintenir et bien documentés. Chaque projet inclut une documentation du code et un diagramme d’architecture clair.