Je concevrai et construirai votre entrepôt de données snowflake ou bigquery
Ingénieur data, pipelines ETL, Spark et expert en entrepôt de données cloud
À propos de ce service
Vos données sont dispersées entre feuilles de calcul, bases de données et outils SaaS sans source unique de vérité ? Je vais concevoir et mettre en place un entrepôt de données cloud moderne sur Snowflake ou BigQuery qui fournit à votre équipe des données propres, fiables et prêtes à être interrogées, permettant aux analystes de répondre aux questions en quelques secondes, pas en jours.
Ce que je propose :
- Mise en place et configuration d’un entrepôt de données Snowflake ou BigQuery
- Modélisation des données avec dbt (couches de staging, intermédiaire et mart)
- Conception de schéma en étoile ou OBT selon vos besoins en reporting
- Pipelines d’ingestion de données depuis vos systèmes sources
- Contrôle d’accès basé sur les rôles et configuration de la sécurité
- Tests dbt pour la qualité et la fraîcheur des données
- Documentation de tous les modèles avec dbt docs
- Connexion aux outils BI (Looker, Tableau, Power BI, Metabase)
Ma stack : Snowflake, BigQuery, Amazon Redshift, dbt Core / dbt Cloud, Fivetran, Airbyte, Python, SQL, Apache Airflow.
Destiné à :
- Startups créant leur premier entrepôt de données cloud
- Entreprises passant d’un entrepôt legacy sur site (Oracle, Teradata) au cloud
- Équipes ayant des données brutes dans S3 ou GCS et nécessitant un entrepôt structuré en dessus
- Équipes d’analytique submergées par des requêtes SQL complexes qui ont besoin d’un couche sémantique propre
Plateforme de stockage:
Snowflake
•
BigQuery
•
redshift
Type de projet:
New Build
Mon portfolio
Autres services de Data engineering I Offre
FAQ
Traduction automatique
Snowflake ou BigQuery — lequel devrais-je utiliser ?
Cela dépend de votre fournisseur cloud et de votre équipe. Snowflake est indépendant du cloud et idéal pour les équipes multi-cloud. BigQuery est préférable si vous êtes déjà sur GCP. Je vous recommanderai la solution adaptée à votre situation lors de notre échange.
Ai-je besoin de dbt ?
Pas toujours, nous pouvons utiliser une autre stack si nécessaire.
Cela se connectera-t-il à mon outil BI ?
Oui. Je configure la connectivité avec Looker, Tableau, Power BI, Redash ou Metabase dans le cadre des packages Standard et Premium.
Pouvez-vous migrer notre entrepôt existant ?
Oui. J’ai migré des entrepôts de MySQL vers Snowflake, Redshift vers BigQuery, et SQL Server sur site vers dbt Cloud. Incluez les détails dans votre message.
De quel accès avez-vous besoin ?
Pour les plateformes cloud, j’ai besoin d’un compte de service ou d’un rôle IAM avec les permissions nécessaires. Je ne demande jamais les identifiants root.
