Je vais construire un pipeline de nettoyage et de validation de données en python

N
natsuki_yunyuan
N
natsuki_yunyuan
natsuki
Certaines informations ont été traduites automatiquement.

À propos de ce service

Traduction automatique

La plupart des problèmes de données ne sont pas des problèmes d’analyse. Ce sont des problèmes de nettoyage que personne ne veut regarder.


Un pipeline qui "répare" silencieusement de mauvaises données est pire que celui qui les refuse. Il transforme 15/01/2026 en le mauvais mois, supprime 3 % des lignes, et produit un rapport qui semble propre mais est incorrect.


CE QUE VOUS OBTENEZ

- Un pipeline Python qui lit vos fichiers, nettoie ce qu’il peut prouver, et met en quarantaine le reste avec une raison écrite.

- Chaque ligne rejetée est enregistrée dans son propre fichier avec sa source et son numéro de ligne. Rien n’est supprimé discrètement.

- Des règles de validation que vous pouvez lire et modifier : types, plages, champs obligatoires, formats de date, doublons.

- Un rapport vérifiable avec des codes de sortie, pour qu’il échoue bruyamment au lieu d’écrire un fichier incorrect.

- Des tests, pour que vous puissiez modifier les règles sans les casser.

- Un document de transfert : ce qui a été construit, comment l’exécuter, ce qui a été vérifié, et ses limites.


COMMENT JE TRAVAILLE

Je regarde vos données avant de faire un devis. Si une colonne est ambiguë, je préfère demander plutôt que deviner.


STACK

Python, uniquement la bibliothèque standard. Rien à installer.


Dites-moi ce que "nettoyer" signifie pour vos données et je vous dirai si c’est adapté. Échantillons sur GitHub - contactez-moi pour le lien.

Découvrez natsuki

natsuki

all

  • DeChine
  • Membre depuissept. 2026
  • Temps de réponse moy.1 heure
  • Langues

    Chinois, Anglais
I build automation that connects AI to the real world. AI agents with real memory architecture - not a prompt around a chat API. Data pipelines that refuse to guess. Tools that pull structured data out of human-readable documents. I ship with verification: my samples carry a test suite you can run yourself, one command, no install. I also write handover docs - how to run it, what was verified, and what it does NOT do. Three public samples on GitHub, 99 passing tests - message me for the link. I also work on motion control: EtherCAT, ODrive, Klipper.

Traduction automatique