Je vais concevoir une pipeline ETL, nettoyage de données, enrichissement de données

Certaines informations ont été traduites automatiquement.

Chine

Je parle Chinois, Anglais

Ingénieur data, ETL, APIs et automatisation BI

Bonjour, je suis Jay — un spécialiste en ingénierie des données et automatisation avec une expérience de gestion d'une équipe de plus de 15 ingénieurs en données. J'aide les entreprises à créer des s...
À propos de ce service

Ce que je peux faire

J’aide les entreprises à automatiser, organiser et optimiser leurs flux de données, de la collecte à la génération de rapports.


Mes services incluent :

Développement et optimisation de requêtes SQL

Flux de données automatisés et systèmes de reporting

Traitement par lots avec des solutions évolutives

Traitement en temps réel et pipelines de streaming

Nettoyage, transformation et intégration de données

Intégration API et synchronisation automatisée des données

Conception de bases de données et d’entrepôts de données

Solutions de reporting d’entreprise et tableaux de bord

Visualisation de données avec Power BI et Tableau

Solutions d’automatisation de données de bout en bout pour startups et entreprises


  • Expérience dans la migration de données depuis des systèmes legacy (sur site) et API vers Azure Data Lake, en effectuant des transformations complexes sur les données avec DataBricks (Python et PySpark), en transférant les données traitées vers SQL Server / PostgreSQL / Data ou Delta Lake.


  • Expérience dans la mise en œuvre de flux de travail évolutifs, optimisés de bout en bout, sur Azure Data Factory / Databricks pour extraire, traiter et stocker des données provenant de sources diverses.

Technologie:

Apache Hadoop

Apache Kafka

Java

Python

Scala

Expertise:

Intégration API

Acquisition de données

Mon portfolio

Autres services de Traitement de données I Offre