Je construirai un pipeline de données etl évolutif utilisant apache airflow, bigquery ou snowflake

Certaines informations ont été traduites automatiquement.

Pakistan

Je parle Ourdou, Anglais, Allemand

IA et MLOps, tâches NLP avec déploiement cloud de bout en bout

Bonjour, je suis Hamza — un spécialiste en MLOps et ingénierie des données qui construit des systèmes d'IA qui fonctionnent réellement en production. Des pipelines ML conteneurisés avec Docker aux cha...
À propos de ce service

Vous avez besoin de données propres et automatisées qui s’écoulent dans votre entrepôt ? Je concevrai et construirai un pipeline ETL robuste adapté à vos sources de données et à votre plateforme cloud.


Ce que je propose :

Conception et orchestration de DAG Apache Airflow

Schéma en étoile / Architecture Medallion (Bronze / Silver / Gold)

Ingestion depuis APIs, bases de données, S3 ou fichiers plats

BigQuery ou Snowflake comme entrepôt de données

Partitionnement et clustering pour des requêtes économiques

Documentation complète et transfert de compétences


J’ai construit un pipeline traitant plus de 2 400 transactions par jour avec BigQuery, réduisant les coûts de requête de 40 % grâce à des stratégies de partitionnement intelligentes. Gagnant du Hackfest 2025 pour un pipeline de données de bout en bout sur AWS S3, Airflow, Snowflake et Power BI.

Destination Platform:

Snowflake

Amazon Redshift

Outils et plateformes:

AWS Glue DataBrew

Google Cloud Dataflow

Mon portfolio