Je vais écrire des vérifications de validation et de qualité des données en Python pour votre pipeline ETL

Certaines informations ont été traduites automatiquement.

Taïwan

Je parle Chinois, Anglais

Clonage de voix AI en mandarin, automatisation et pipelines de données

Ingénieur logiciel et constructeur de pipelines de données à Taïwan. Je gère un studio AI en solo (SonarCue) spécialisé dans le clonage de voix AI avec sortie en mandarin/chinois naturel, ainsi que da...
À propos de ce service

Arrêtez les erreurs de données silencieuses : vérifications automatisées en Python + pytest qui détectent les échecs que vos logs qualifient de « succès ».


Les pipelines crash rarement, ils renvoient discrètement des données erronées, comme une API qui retourne une liste vide alors que le journal indique un succès. Je crée les vérifications qui repèrent ces schémas.


CE QUE VOUS OBTENEZ

- Un rapport de détection des problèmes dans le périmètre, avec preuves et étapes de reproduction

- Des vérifications personnalisées en Python (Pandas + pytest), le code source complet, à vous de garder

- Premium : un workflow GitHub Actions pour un dépôt, plus un guide de gestion des échecs


LES VÉRIFICATIONS COVERT : fraîcheur, complétude, dérive de schéma, cohérence entre sources, précision de l’état d’échec.


PÉRIMÈTRE

- 1 source de données = 1 fichier CSV/JSON, 1 table ou vue, ou 1 point d’API avec un schéma. Vérifiez que les comptes correspondent au total par commande.

- Révisions : une seule étape sur les données initialement convenues. Nouvelles sources ou règles : une offre personnalisée.


Basé sur 32 échecs documentés issus de cas réels de mes propres systèmes de données sur GitHub ; un rapport de détection d’échantillons est disponible dans la galerie.


PAS D’APPELS, tout par écrit sur Fiverr. Pas de credentials de base de données pour Basic/Standard : envoyez un échantillon de données ou une URL d’un endpoint public.


Un service d’ingénierie logicielle. Je ne donne pas de conseils sur ce que vos données signifient pour votre entreprise.

Langue:

Chinois (simplifié)

Anglais

Expertise technique:

Autres

Expertise:

Pipelines de data

Gestion des data

Secteur:

Analyse de données

Services financiers