Je vais construire des pipelines de données évolutifs, des workflows ETL et des solutions de données cloud

Certaines informations ont été traduites automatiquement.

Pakistan

Je parle Anglais

23 commandes terminées

J'essaierai de tout faire comme votre priorité, j'ai travaillé sur plusieurs projets d'automatisation et de scraping.
À propos de ce service

Vous avez du mal à gérer des données brutes désordonnées ou à rationaliser vos workflows de données ? Je suis là pour vous aider !

En tant que Data Engineer expérimenté, je me spécialise dans la conception et le développement de pipelines de données de bout en bout qui sont évolutifs, compatibles avec le cloud et optimisés pour la performance. Je possède une compréhension approfondie de la transformation de jeux de données complexes en insights exploitables pour votre entreprise.


Ce que je propose :

Création de pipelines ETL/ELT (Batch et Streaming)

Déploiement en cloud : AWS Glue, Lambda, Azure Data Factory, Databricks, GCP Dataflow

Traitement en temps réel avec Kafka, Pub/Sub ou Event Hubs

Intégration API et support de stockage cloud

Validation, nettoyage et assurance qualité des données

Automatisation de l’ingestion, de la transformation et du chargement des données

Intégration PostgreSQL, NoSQL, Snowflake, Databricks

Pile technologique :

Python, SQL, Spark, PySpark, Apache Kafka, AWS, Azure, GCP, Databricks, PostgreSQL, NoSQL, Hadoop, Snowflake, et plus encore.

Destination Platform:

Snowflake

Google BigQuery

Amazon Redshift

Outils et plateformes:

Azure Data Factory

Autres