Je vais construire des pipelines de données fiables en utilisant python, dbt, etc
Ingénieur data, web scraping, agents IA
À propos de ce service
Vos pipelines de données sont-ils lents, peu fiables ou tout simplement inexistants ?
Je vais concevoir et construire pour vous un pipeline ETL/ELT propre, prêt pour la production, qui déplace et transforme automatiquement vos données de n'importe quelle source vers votre destination, afin que votre équipe dispose toujours de données précises et à jour sans lever le petit doigt.
Avec plus de 3 ans d'expérience pratique en ingénierie des données, je crée des pipelines évolutifs, faciles à maintenir et conçus pour durer.
............................................................
CE QUE JE VAIS FAIRE POUR VOUS :
Extraire des données de n'importe quelle API REST, bases de données (MySQL, Postgres), fichiers plats (CSV, JSON) ou plateformes SaaS. Transformer et modéliser vos données proprement en utilisant Python, PySpark et dbt. Charger dans votre entrepôt cible BigQuery, Snowflake ou Redshift. Automatiser et planifier tout avec des DAGs Apache Airflow. Déployer sur votre cloud AWS, GCP ou Azure. Ajouter des tests de qualité des données et des validations à chaque étape.
............................................................
MON STACK TECHNIQUE :
Python · SQL · PySpark · dbt · Apache Airflow · AWS · GCP · Azure · BigQuery · Snowflake · Redshift · Docker · Git

