Je construirai des pipelines ETL PySpark pour des données par lots et en streaming sur AWS

Certaines informations ont été traduites automatiquement.

Pakistan

Je parle Ourdou, Anglais

1 commande terminée

Ingénieur data spécialisé en PySpark, AWS et QuickSight

Je suis Muhammad Zeeshan, ingénieur datas travaillant à temps plein sur des plateformes de données AWS. Je conçois des pipelines ETL PySpark (batch et streaming) sur Amazon EMR, je mets en place des l...
À propos de ce service

Vous cherchez un travail PySpark fiable ou un pipeline ETL complet ? Je suis ingénieur de données à plein temps, et la construction de pipelines batch et streaming avec PySpark sur AWS est mon quotidien.


Ce que je peux faire pour vous :

- Écrire des jobs ETL PySpark : ingestion, nettoyage, transformation, chargement

- Traiter de grands jeux de données par batch sur Amazon EMR

- Concevoir des jobs de streaming pour des données en temps réel

- Intégrer vos jobs avec Apache Hive et Apache Hudi

- Mettre en place ou organiser un data lake sur Amazon S3

- Optimiser ou déboguer du code PySpark existant


Ce que vous obtenez :

- Un code propre et commenté

- Des notes concises sur la façon de l’exécuter et de le programmer

- Des réponses généralement en moins d’une heure


Comment cela fonctionne :

1. Envoyez-moi votre source de données, votre cible et la transformation dont vous avez besoin

2. Je confirme le périmètre, le prix et le calendrier

3. Je livre le code et le fais évoluer en fonction de vos retours


Veuillez me contacter avant de commander afin que nous nous mettions d’accord sur le périmètre au préalable.

Expertise:

Big data

•

Manipulation des données

•

etl

•

Transformation

Technologie:

Apache Hadoop

•

Apache Spark

•

Excel

•

Python

•

SQL

•

NoSQL