Je serai votre ingénieur de données en utilisant python et pyspark sur AWS, GCP et Azure

Je suis un ingénieur de données avec plus de 10 ans d'expérience dans la création de plateformes de données en production sur le cloud et les systèmes distribués. Je possède un Master en informatique en cloud computing et systèmes distribués et j'ai travaillé avec des clients allant de startups à Fortune 500, en fournissant des architectures performantes qui traitent des milliards d'événements avec une faible latence et une grande fiabilité.

J'aide les organisations à transformer des données brutes en systèmes évolutifs et prêts pour l'analyse en concevant et en mettant en œuvre des solutions d'ingénierie des données de bout en bout.

Compétences clés

• Architecture et stratégie de données Architectures évolutives et sécurisées alignées avec les besoins métier et de conformité
• Pipeline batch et streaming ETL/ELT utilisant Spark, PySpark, Flink, Kafka
• Ingénierie des données cloud AWS, GCP, Azure, incluant Databricks, Data Factory, Dataflow, S3, BigQuery
• Intégration de données et APIs ingestion d'API dans les lacs de données, entrepôts et bases de données
• Activation analytique Pipelines pour Power BI, Tableau, Qlik et tableaux de bord
• Databricks & PySpark développement de workflows et pipelines
• Bases de données SQL optimisation et stockage; NoSQL (MongoDB, Cassandra)
• Automatisation & orchestration Airflow, NiFi
• Activation ML plateformes de données optimisées pour l'apprentissage automatique