Parcourir les catégories
Explorer
Fiverr Pro
Français
$
USD
Je vais concevoir des solutions de plateforme de données évolutives avec spark, airflow, dbt
Continuez à construire et à vous affamer de nouvelles connaissances sur Data et AI
Ingénieur en analytics avec plus de 5 ans d’expérience. Expert en data build tool (dbt), bigquery, entreposage de données, visualisation de données, tableau, looker, metabase, powerbi
À propos de ce service
Vous êtes submergé par des données brutes mais avide d’insights ? Je propose des services professionnels de Data Engineering et Analytics pour vous aider à transformer des ensembles de données désordonnés en pipelines automatisés et performants.
Que vous ayez besoin d’une analyse rapide avec PySpark ou d’une architecture OLAP complète, je construis des systèmes robustes qui évoluent avec votre entreprise.
Ce que je propose :
- Analyse de données : Traitement à grande vitesse et insights avec PySpark.
- Développement ETL/ELT : Conception de workflows efficaces pour déplacer et transformer vos données.
- Orchestration automatisée : Utilisation de Apache Airflow pour garantir que vos données soient toujours à jour et fiables.
- Pile de données moderne : Expertise en dbt (Data Build Tool) pour la modélisation SQL modulaire et Google BigQuery pour l’entreposage cloud.
- Streaming et batch : Traitement en temps réel ou par lots via Apache Flink et Spark.
FAQ
Traduction automatique
De quoi ai-je besoin pour commencer ?
Pour commencer, j’aurai besoin d’accéder à votre source de données (ou à un schéma d’échantillon), d’une description claire de votre logique métier ou de vos besoins en transformation, et d’un accès à l’environnement cible où le pipeline sera construit.
Fournissez-vous une documentation pour les pipelines que vous construisez ?
Oui ! Surtout dans le package Premium, je fournis une documentation complète couvrant l’architecture, la traçabilité des données (avec dbt) et les instructions pour maintenir ou déclencher les workflows.
Pouvez-vous gérer le streaming de données en temps réel ?
Absolument. En utilisant Apache Flink ou Kafka Streams, je peux créer des pipelines à faible latence pour l’analyse en temps réel. Contactez-moi d’abord si votre projet nécessite un traitement en moins d’une seconde afin que nous puissions discuter de l’infrastructure.
Mes données sont-elles en sécurité avec vous ?
La sécurité est ma priorité absolue. Je préfère travailler dans votre infrastructure existante via des rôles IAM ou des comptes de service avec un accès « Least Privilege ». Je ne stocke jamais vos données sensibles sur mes appareils personnels.
Que se passe-t-il si un pipeline échoue après la livraison de la commande ?
Je conçois des pipelines ETL, ELT « résilients » avec une gestion des erreurs intégrée et des alertes (via Airflow). Je propose également une période de support après livraison (selon le package) pour assurer le bon fonctionnement et corriger d’éventuels bugs initiaux.
