Je vais construire des pipelines de données snowflake avec snowpipe, streams, tasks et tables dynamiques

Certaines informations ont été traduites automatiquement.
5,0
5,0

Bangladesh

Je parle Anglais

2 commandes terminées

Ingénieur de données

Ingénieur de données axé sur SQL pour Snowflake et Microsoft Fabric. J'aide les équipes à gérer des data warehouses rapides, sécurisés et abordables : • Optimisation des coûts, de la sécurité (RBAC) ...
À propos de ce service

Vous avez besoin de données dans Snowflake qui se chargent automatiquement, ne mettent à jour que ce qui a changé et évitent la double comptabilisation ? Je construis des pipelines directement dans Snowflake avec du SQL simple, sans outil supplémentaire à payer ou à maintenir.


Ce que je réalise :

  • Ingestion : étapes, formats de fichiers et Snowpipe pour l’auto-ingestion depuis S3, Azure Blob ou Google Cloud Storage
  • Capture des changements : Streams + Tasks avec MERGE pour les upserts et la déduplication
  • Historique : dimensions SCD Type 2 pour les clients, produits ou comptes
  • Couche de reporting : tables dynamiques pour les marts quotidiens et mensuels
  • Qualité des données : vérifications des valeurs nulles, doublons, clés orphelines et fraîcheur
  • Monitoring : historique des tâches, alertes en cas d’échec par email et garde-fous de coûts


Ma façon de travailler :

  1. Nous convenons des sources, des tables et des horaires de rafraîchissement
  2. Je construis dans un schéma de développement et teste avec vos données d’échantillon
  3. Vous examinez les résultats et l’historique des exécutions
  4. Remise avec un runbook et un diagramme


Vous recevez du SQL versionné, un diagramme du pipeline, les résultats des tests et la documentation.


Vous utilisez déjà Fivetran, ADF ou SSIS ? Je peux récupérer les données là où ils les déposent.

Destination Platform:

Snowflake

•

PostgreSQL

•

mySQL

Outils et plateformes:

Fivetran

•

Matillion

•

Microsoft SSIS

Mon portfolio

Autres services de Data engineering I Offre

Avis

1 avis concernant ce service
5,0

(1)
(0)
(0)
(0)
(0)
Détails de la notation
  • Niveau de communication avec le freelance
    5
  • Qualité de la livraison
    5
  • Valeur de la livraison
    5
Trier par
Les plus pertinents
  • A

    adityapons

    US

    États-Unis

    Collaboration en cours
    5

    delivered high quality work with strong understanding of business requirements

    200 $US-400 $US

    Prix

    1 jour

    Durée

    Utile?
    Oui
    Non
Avis

1 avis concernant ce service
5,0

(1)
(0)
(0)
(0)
(0)
Détails de la notation
  • Niveau de communication avec le freelance
    5
  • Qualité de la livraison
    5
  • Valeur de la livraison
    5
Trier par
Les plus pertinents
  • A

    adityapons

    US

    États-Unis

    Collaboration en cours
    5

    delivered high quality work with strong understanding of business requirements

    200 $US-400 $US

    Prix

    1 jour

    Durée

    Utile?
    Oui
    Non