Je construirai des pipelines de données et des plates-formes sur gcp, AWS et azur

Je suis un ingénieur en données avec plus de 10 ans d’expérience, spécialisé en Apache Airflow, Apache Spark, BigQuery et Snowflake. J’ai une expertise dans la construction de pipelines ETL en utilisant Python et je peux travailler avec des APIs, des bases de données et des fichiers plats comme sources de données. J’ai déployé des pipelines sur les principales plateformes cloud, notamment AWS, Google Cloud et Azure. J’ai également travaillé sur des pipelines CDC utilisant Kafka et Spark Streaming/Meltano.

Avec de solides compétences analytiques et une formation en analyse de données et apprentissage automatique, j’ai travaillé dans divers secteurs, notamment le développement de logiciels pour centres de contact, la cybersécurité, la fintech et le covoiturage.

Je peux vous aider avec l’architecture de plateforme de données, la construction de plateformes de données, la création de data marts à grande échelle avec Spark et Hive, l’orchestration de pipelines avec Airflow/Dagster/Mage, et le déploiement de plateformes de données sur AWS et GCP. De plus, j’ai de l’expérience avec des outils de contrôle de version et CICD comme GitHub, GitLab et Jenkins. Intégration de Slack/Twillio/Google Chat pour la surveillance.

Configurez Stitch, Talend, Ascend, Fivetran pour des plateformes gérées et créez des connecteurs personnalisés.

Collaborons pour répondre à vos besoins en ingénierie des données.

Veuillez ne pas passer de commande sans en discuter.