Je vais concevoir des pipelines etl avec apache spark, airflow et une stack de données moderne

Certaines informations ont été traduites automatiquement.

Pakistan

Je parle Anglais, Japonais

Ingénieur logiciel

Je suis ingénieur logiciel avec 3 ans d’expérience dans le développement et l’optimisation de services backend pour des systèmes de traitement de paiements à grande échelle. J’ai mis en place des pipe...
À propos de ce service

Transformez des données désordonnées en pipelines évolutifs.

Je crée des pipelines ETL, des entrepôts de données et des solutions Apache Spark qui gèrent des échelles réelles.

pipelines ETL / ELT (batch et streaming)

Traitement Apache Spark / PySpark

Airflow DAGs et automatisation des workflows

Conception d’entrepôts de données (Snowflake, BigQuery, Redshift)

Kafka et pipelines de données en temps réel

Architecture propre, rapide et évolutive conçue pour la production, pas pour des démos.


Contactez-moi pour discuter de votre projet ou obtenir une suggestion d’architecture rapide.

Langue:

Anglais

Expertise technique:

dbt (Data Build Tool)

Apache Airflow

Expertise:

Pipelines de data

Développement ETL

Secteur:

Audio et vidéo

Analyse de données

Services financiers