datenfabrik.dedupe Findet Dubletten Detects Duplicates

datenfabrik.dedupe
Findet Dubletten
Detects Duplicates
Bei dem Zusammenführen von Datenbeständen aus
unterschiedlichen Systemen entstehen doppelte Datensätze, die sich nur schwer automatisiert finden lassen.
datenfabrik.dedupe ist eine SSIS Datenflusskomponente
zur Suche von Dubletten mit phonetischen Algorithmen.
Die Komponente findet extrem schnell mehrfach vorhandene Datensätze in Adressbeständen und bietet eine
einzigartige Symbiose von Treffergenauigkeit und Performance. Für den Abgleich von 15 Millionen Datensätzen
benötigt datenfabrik.dedupe weniger als eine Stunde.
When merging data pools from different systems, duplicated data records, which are difficult to find in automated
processes, arise. With datenfabrik.dedupe a SSIS data
flow component to search for duplicates with phonetic
algorithms is provided. The component quickly finds redundant data records in address pools and offers a unique
symbiosis of hit accuracy and performance. It takes less
than one hour to process 15 million data records with
datenfabrik.dedupe.
Funktionsübersicht
• Dublettensuche mit phonetischen Algorithmen
Functional Overview
• Duplicate search with phonetic algorithms
• Definition beliebiger Sortierschlüssel, der Suchumgebung (Sorted Neighbourhood) und beliebiger SuchParametersets
• Definition of sort keys, the search environment (sorted
neighborhood) and any search parametersets
• Minimaler Score pro Spalte und pro Parameterset
• Filter zur Normalisierung von Namen und Straßen
• Partielle Dublettensuche
• Speichern und Laden von Parametersets
X
I
V
• Minimum score per column and parameterset
• Filter for the standardization of names and streets
• Partial duplicate search
• Saving and loading of parametersets
www.datenfabrik.com
Konfiguration der verschiedenen Parameter zur Dublettensuche, z. B. Suchumgebungen, Sortierschlüssel, temporärer SQL Server oder partielle Dublettensuche.
Configuration of different parameters for duplicate search,
e. g. search environments, sort keys, temporary SQL Servers or partial duplicate search.
Definition von Parametersets zur Dublettensuche unter
Angabe verschiedener Schwellenwerte, Kreuzprüfungen
und Normalisierungsfilter.
Definition of parametersets for search of duplicates using
different threshold values, cross-checks and normalization
filter.
Konfiguration von Sortierschlüsseln zur Definition verschiedener Suchumgebungen über beliebige Eingangsspalten.
Configuration of sort keys to define different search environments by using definable input columns.
Einstellungen zur Normalisierung der Daten über XMLDateien oder Datenbanken.
Settings to normalize data via XML files or databases.
X
V