Je vais faire correspondre, fusionner et dédupliquer vos ensembles de données désordonnés
Doctorant en astrophysique, conseil en statistiques
À propos de ce service
Deux listes de la même personne, produit ou lieu, sans identifiant partagé : noms orthographiés différemment, fautes de frappe, champs manquants. La fonction VLOOKUP d'Excel abandonne immédiatement.
Je réalise une liaison probabiliste de dossiers : au lieu d’un « correspond / ne correspond pas », chaque paire candidate reçoit un score indiquant la probabilité qu’il s’agisse de la même entité, en fonction de la valeur réelle de chaque accord sur chaque champ. Se mettre d’accord sur un nom de famille rare est une preuve forte ; sur un nom commun, c’est faible. La méthode fait la différence.
Ce qui compte pour vous : vous choisissez le seuil. Une confiance élevée pour une fusion automatique, et une liste séparée de paires ambiguës pour qu’un humain puisse examiner, au lieu de fusionner silencieusement deux clients différents ou de garder le même deux fois.
J’utilise cela sur des catalogues astronomiques, où fusionner deux objets incorrects invalide la science. Vos données méritent le même soin.
Ce que je fournis : votre ensemble de données fusionné avec un score de confiance pour chaque correspondance ; une liste séparée « à revoir » pour les cas ambigus ; un rapport de qualité indiquant combien ont été appariés, combien ne l’ont pas été, et pourquoi ; et les doublons trouvés dans chaque fichier, pas seulement entre eux.
Envoyez un petit échantillon d’abord si vous souhaitez voir comment cela fonctionne avant de commander.
Technologie:
Python
FAQ
Traduction automatique
Quels formats de fichiers acceptez-vous ?
CSV ou Excel. Si vos données sont sensibles, envoyez d’abord un échantillon avec des valeurs fictives ou anonymisées, la méthode fonctionne de la même façon avec des données réelles par la suite.
Je ne sais pas quels champs faire correspondre, pouvez-vous m’aider ?
Oui, indiquez-moi quels champs vous avez (nom, adresse, téléphone, etc.) et je vous dirai quelle combinaison sera la plus efficace pour vos données.
Dois-je privilégier la précision ou le rappel ?
Ce qui compte le plus pour vous : ne jamais fusionner deux enregistrements différents, ou ne jamais manquer une correspondance vraie. Vous ne pouvez pas avoir les deux à la fois, alors indiquez-moi ce qui est le plus important et je réglerai le seuil en conséquence.

