Je vais construire des pipelines de données GCP en utilisant BigQuery, Dataflow, Terraform, PySpark, Airflow
À propos de ce service
Vous cherchez un ingénieur de données Google Cloud compétent pour construire, automatiser et optimiser vos flux de données ? Vous êtes au bon endroit !
Je vais concevoir et développer des pipelines de données évolutifs sur Google Cloud Platform (GCP) en utilisant des outils comme BigQuery, Dataflow, Cloud Composer, PySpark, Terraform, Pub/Sub, Firestore, Cloud Run et Cloud Functions. De l’ingestion de données brutes à la livraison de modèles prêts pour l’analyse, je garantis automatisation, fiabilité et efficacité des coûts dans chaque projet.
Ce que je propose :
- Conception de pipelines ETL/ELT de bout en bout avec BigQuery et Dataflow
- Architectures orientées événements avec Pub/Sub et Cloud Functions
- Orchestration des données via Cloud Composer
- Automatisation Infrastructure as Code avec Terraform
- Streaming de données en temps réel et intégration avec Firestore
- Mise en place de CI/CD pour un déploiement continu sur Cloud Run ou Cloud Build
- Documentation complète et transfert de code
Que vous soyez une startup ou une grande entreprise, je peux vous aider à construire des pipelines de production qui évoluent avec votre activité.
Plateforme de stockage:
BigQuery
•
Databricks
Type de projet:
Migration
