Tamr erkennt Dubletten und verbindet Kundendaten mit KI

Tamr

Ein Geschäftskontakt heißt im Vertrieb „M. Schneider“, in der Buchhaltung aber „Mara Schneider“. Die Adresse weicht ebenfalls ab. Tamr steht für das Problem solcher widersprüchlichen Einträge in mehreren Systemen.

Solche Unterschiede erschweren Auswertungen und können dazu führen, dass Teams auf verschiedene Angaben zugreifen. Ohne verlässliche Zuordnung bleibt unklar, welche Informationen zusammengehören. Das betrifft data quality und analytics ebenso wie tägliche Entscheidungen.

Eine Lösung muss Informationen aus verschiedenen Quellen verbinden, ohne wichtige Unterschiede zu übersehen. Dabei zählt nicht allein, ob Datensätze gleich aussehen. Entscheidend ist, ob sie dieselbe reale Person oder Firma beschreiben.

Woran lässt sich erkennen, ob ein Werkzeug zu den eigenen Daten und Abläufen passt? Zur Einordnung erklärt zunächst das Datenmanagement-Problem, das Tamr adressiert.

Die wichtigsten Punkte

  • Uneinheitliche Einträge erschweren verlässliche Auswertungen.
  • Master Data Management verbindet und pflegt zentrale Geschäftsdaten.
  • Ein Entitätsabgleich sucht Einträge zur selben realen Entität.
  • KI kann Merkmale aus Texten gewinnen und Datensätze zuordnen.
  • Fachliche Prüfung bleibt für verlässliche Ergebnisse wichtig.

Was ist Tamr und welches Datenproblem löst es?

Tamr ist eine Plattform für KI-gestütztes Master Data Management. Sie verbindet Unternehmensdaten aus verschiedenen Quellen und unterstützt einheitliche Datensätze für reale Geschäftsentitäten.

Ein Golden Record ist ein bereinigter und angereicherter Datensatz, der Informationen aus mehreren Einträgen zu einer realen Entität zusammenführt. Das Ziel ist nicht bloß, gleiche Zeilen zu löschen.

Master Data Management geht über das Entfernen exakt gleicher Zeilen hinaus. Es ordnet auch unterschiedliche Einträge derselben realen Entität zu.

Von der Forschung am MIT zur Unternehmensplattform

Die Tamr company wurde 2013 von Dr. Michael Stonebraker, Andy Palmer, Ihab Ilyas und weiteren Mitgründern gegründet. Ihre Arbeit baute auf Forschung am MIT Computer Science and Artificial Intelligence Laboratory auf.

Das Unternehmen hat seinen Standort in Cambridge, Massachusetts. Bei den Tamr dates ist 2013 das belegte Gründungsjahr. Aus dem Forschungsansatz entstand eine Plattform für Unternehmen, die große Datenbestände verbinden und pflegen müssen.

Die Grundlage ist kein einzelnes Produkt für eine einzelne Datenbank. Tamr bietet products für Datenmanagement und Datenaufbereitung. Die konkrete Nutzung hängt vom gewählten Bereich und den angebundenen Quellsystemen ab.

Master Data Management und Golden Records

Master data sind zentrale Informationen zu Kunden, Lieferanten, Produkten oder anderen Geschäftsentitäten. Master data management bezeichnet die Pflege und Verbindung solcher Angaben über mehrere Systeme hinweg.

Ein Quellsystem ist eine angebundene Datenbank oder operative Anwendung. Dort können dieselben Geschäftsdaten mit unterschiedlichen Namen, Feldern oder Details liegen. Die Plattform hilft, diese Informationen in einem Golden Record zu bündeln.

Das Ergebnis kann als foundation für weitere Arbeit dienen, etwa für Berichte oder operative Anwendungen. Es ersetzt keine fachliche Entscheidung darüber, welche Angaben stimmen. Unternehmen müssen festlegen, welche Datenqualität sie brauchen und wer strittige Fälle prüft.

Die zentrale Herausforderung beginnt beim Entitätsabgleich: Einträge aus verschiedenen Quellsystemen müssen derselben Person, Firma oder anderen Geschäftsentität zugeordnet werden.

Wie führt Tamr Dubletten aus verschiedenen Quellen zusammen?

Eine Quelle speichert „Anna Maria Becker“ in Vor-, Mittel- und Nachname. Eine zweite führt „Anna Maria Becker“ in einem Feld. Beide Einträge könnten dieselbe Person beschreiben, doch ein einfacher Textvergleich erkennt das nicht sicher.

Entitätsabgleich bedeutet, verschiedene Einträge derselben realen Person, Firma oder Geschäftsentität zuzuordnen. Das ist schon innerhalb eines einzelnen Systems anspruchsvoll. Über mehrere data sources wird es schwieriger, wenn Schreibweise, Schema und Detailgrad abweichen.

Ein exakt gleicher Wert kann ein nützlicher Hinweis sein, reicht aber nicht immer aus. Ein Firmenname kann verkürzt, ein Kontakt anders geschrieben oder eine Adresse aufgeteilt sein. Eine data integration muss solche Unterschiede einordnen können.

Regelbasierte ETL-Strecken legen fest, welche Felder verglichen und wie Werte umgeformt werden. Bei wechselnden Daten können diese Regeln fehleranfällig werden. Änderungen an den Quellen machen lange ETL-Ketten zudem schwer wartbar.

Vergleichsaspekt Regelbasierter Ansatz KI-gestützter Entitätsabgleich
Matching-Grundlage Festgelegte Regeln Muster aus Datensätzen und Kontext
Schemaunterschiede Häufig vorherige Vereinheitlichung nötig Zuordnung trotz unterschiedlicher Feldstruktur möglich
Anpassung Regeländerungen bei Datenverschiebungen Modell und Kuratierung können auf neue Daten reagieren
Typisches Risiko Schwer wartbare ETL-Ketten Ergebnisse brauchen weiterhin Kontrolle

Ein KI-Modell kann mehrere Hinweise zusammen bewerten, statt nur auf eine exakte Übereinstimmung zu achten. Das bedeutet nicht, dass jede Zuordnung automatisch richtig ist. Ergebnisse brauchen Regeln für Prüfung und Korrektur.

So wird aus getrennten records eine verbundene Sicht auf Entitäten. Welche Datenaufgaben Tamrs vorkonfigurierte Data Products und KI dabei übernehmen, hängt vom Datenbereich ab.

Welche Aufgaben übernehmen KI und Data Products?

Ein E-Commerce-Produktname kann Marke, Material, Stil, Muster, Farbe und Stückzahl enthalten, obwohl diese Angaben nicht in getrennten Feldern stehen. Textauswertung kann solche Details in nutzbare Merkmale umwandeln.

Data Products sind für bestimmte Datenbereiche vorkonfiguriert und verlangen wenig oder keine Code-Konfiguration. Tamr nutzt Machine Learning für Data Mastering seit 2013. Tamr Cloud läuft als SaaS auf Google Cloud.

Produkttexte in analysierbare Merkmale umwandeln

Produktnamen enthalten solche Angaben oft in wechselnder Reihenfolge. Ein Artikel kann etwa Marke und Farbe nennen, während Material und Stückzahl fehlen oder anders geschrieben sind.

Data Products nutzen Google Vertex AI und Gemini, um Text auszuwerten. Gemini kann strukturierte Attribute gewinnen, sofern das Beschreibungsfeld dem Datenmodell zugeordnet ist. Die gewonnenen Werte lassen sich später für den Entitätsabgleich nutzen oder an nachgelagerte Systeme ausgeben.

Die Ausgabe ist nur so brauchbar wie die Zuordnung zum Datenmodell. Nutzer müssen daher festlegen, welche Attribute wichtig sind. Danach lässt sich prüfen, ob die extrahierten Werte zur fachlichen Definition passen.

Daten nach einer passenden Taxonomie klassifizieren

Nutzer können eine gewünschte Taxonomie festlegen und Produkte nach diesen Gruppen klassifizieren lassen. Eine Taxonomie ist ein geordnetes System von Kategorien. Sie hilft, uneinheitliche Einträge nach gemeinsamen Merkmalen einzuordnen.

Weitere Aufgaben sind die Einordnung eines Eintrags als Person oder Unternehmen sowie das Markieren ungültiger Platzhalterwerte. Dazu zählen Werte wie NONE oder 00000000. Solche Klassifikationsergebnisse können auch Merkmale für den Entitätsabgleich liefern.

Ein typischer Ablauf umfasst vier Schritte:

  1. Eingabefeld dem Datenmodell zuordnen.
  2. Gewünschte Attribute oder Taxonomie festlegen.
  3. Data Product ausführen und Ergebnisse prüfen.
  4. Bereinigte Attribute für Abgleich oder weitere Nutzung ausgeben.

Diese Arbeit kann die Datenaufbereitung erleichtern, ersetzt aber keine klaren Definitionen. Vereinheitlichte Merkmale werden praktisch wertvoll, wenn sie Entscheidungen in konkreten Unternehmensbereichen unterstützen.

Wo bringt Tamr im Unternehmen konkreten Nutzen?

Ein Unternehmen kann denselben Kunden in mehreren Geschäftsbereichen mit unterschiedlichen Informationen führen. Eine verbundene Kundensicht macht Zusammenhänge leichter erkennbar.

Einheitliche Kunden-, Kontakt- und Lieferantendaten können Entscheidungen unterstützen, garantieren aber keine besseren Geschäftsergebnisse. Der Nutzen hängt davon ab, ob die Daten vollständig sind und fachlich passende Definitionen nutzen.

Kunden- und Lieferantendaten vereinheitlichen

Ein verlässlicher Kundenüberblick kann Vertrieb und Finanzbereich bei der Arbeit mit konsistenten Angaben helfen. Auch Lieferketten und Betriebsabläufe können von klar zugeordneten Datensätzen profitieren.

Bei Lieferantenstammdaten hilft die Verbindung von Einträgen aus mehreren Quellen, eine einheitlichere Übersicht im Einkauf zu schaffen. Das kann Dubletten und abweichende Angaben sichtbarer machen. Fachleute müssen dennoch entscheiden, welche Daten gelten.

Data Products können Datenbereiche vorbereiten, bevor Informationen in Analysen oder operative Abläufe einfließen. Die folgende Übersicht zeigt mögliche Ergebnisse, nicht zugesicherte Wirkungen.

Anwendungsfall Eingabedaten Ergebnis Möglicher Nutzen
Kundenübersicht Kunden- und Kontaktdatensätze Verbundene Kundensicht Konsistentere Auswertungen
Lieferantenstammdaten Einträge aus mehreren Quellen Vereinheitlichte Lieferantendatensätze Bessere Übersicht im Einkauf
E-Commerce-Analyse Produktnamen mit uneinheitlichen Merkmalen Strukturierte Produktattribute Auswertung nach Produktmerkmalen

Daten für Analysen und operative Entscheidungen nutzen

Eine verbundene Kundensicht kann management analytics unterstützen, wenn Teams vergleichbare Angaben benötigen. Der Vertrieb kann etwa auf denselben Datenstand blicken wie die Finanzplanung. Lieferketten können Lieferanteninformationen aus mehreren Bereichen gemeinsam prüfen.

Solche Daten können auch für laufende Geschäftsprozesse nützlich sein. Ein Datensatz lässt sich an eine operative Anwendung weitergeben oder als Grundlage für Berichte nutzen. Der Zweck sollte vorab feststehen, damit Datenfelder und Qualitätsregeln dazu passen.

Datenzusammenführung allein garantiert keine gute Analyse. Unvollständige Quellinformationen oder uneinheitliche fachliche Definitionen können Ergebnisse verzerren. Vor einem produktiven Einsatz sollten Unternehmen deshalb prüfen, welche Daten tatsächlich verfügbar sind und wer sie bewertet.

Damit wird vor allem wichtig, wie Integration, laufende Pflege und fachliche Kontrolle im eigenen Betrieb aussehen.

Was sollten Unternehmen vor dem Einsatz prüfen?

Vor der Toolauswahl sollten Unternehmen zuerst Quellsysteme, Zuständigkeiten und Qualitätsziele festlegen. Klare Vorgaben zeigen, welche Daten verbunden werden sollen und wer strittige Fälle entscheidet.

Der Betrieb braucht passende Datenzugriffe, klare Zuständigkeiten und eine geplante Prüfung der KI-Ergebnisse. Ohne diese Grundlagen kann Automatisierung unklare Daten nicht verlässlich in gute Daten verwandeln.

Automatisierung braucht klare Datenziele und fachliche Kontrolle. Unternehmen sollten Ergebnisse prüfen, bevor sie in operative Abläufe einfließen.

Daten, Integration und Betriebsaufwand realistisch einschätzen

Unternehmen sollten prüfen, welche Quellsysteme und Datenfelder verfügbar sind. Wichtig ist auch, ob Datenmodelle und Zugriffswege zusammenpassen. Fachbereiche müssen festlegen, wer Regeln und strittige Zuordnungen verantwortet.

Tamr nutzt Vertex AI für Modellinferenz, also die Anwendung eines trainierten Modells auf neue Daten. Modellanfragen können gebündelt, zwischengespeichert und validiert werden. Bei Bedarf lassen sie sich erneut ausführen.

Solche Abläufe beeinflussen den Betrieb und die Integration. Vorab sollte klar sein, welche Daten übertragen werden, wie häufig sie verarbeitet werden und wer Fehler bearbeitet. Das hilft, Aufwand und Abläufe realistisch zu planen.

KI-Ergebnisse kontrollieren und nachschärfen

Foundation Models sind nicht für jede Klassifikationsaufgabe die effizienteste Wahl. Bei bestimmten Aufgaben können sie länger laufen als traditionelle Modelle wie Gradient Boosted Trees.

Wenige repräsentative Beispiele können für die Anpassung eines Foundation Models ausreichen. Traditionelle Modelle brauchen beim Training und bei laufenden Änderungen oft ML-Fachwissen. Ihre kürzere Laufzeit muss gegen diesen Entwicklungs- und Pflegeaufwand abgewogen werden.

Ergebnisse von Foundation Models müssen geprüft und durch menschliches Feedback verbessert werden. Unklare oder strittige Zuordnungen sollten eine fachliche Freigabe erhalten. So fließen Korrekturen in die weitere data curation ein.

Vor der Entscheidung hilft diese Prüfliste:

  • Datenfelder und Schemata erfassen.
  • Integrations- und Betriebsanforderungen klären.
  • Modelllaufzeit und Anpassungsaufwand vergleichen.
  • Prüfung und Korrektur von Ergebnissen planen.

Ein Praxistest sollte zeigen, ob diese Punkte im Alltag tragfähig sind. Dafür braucht es einen klar abgegrenzten Datenbereich und messbare Qualitätsziele.

Fazit

Verlässliche Analysen beginnen mit nachvollziehbar verbundenen und gepflegten Daten. Tamr kann prüfenswert sein, wenn ein Unternehmen verteilte Einträge zu einem Golden Record zusammenführen muss.

Der mögliche Wert liegt in einer besseren Grundlage für data management analytics, nicht in einer Garantie für gute Entscheidungen. Fachleute müssen Datenqualität und strittige Zuordnungen weiterhin kontrollieren.

Als nächsten Schritt sollte ein Unternehmen einen klar begrenzten Datenbereich mit repräsentativen Quellsystemen auswählen. Zuerst sollten ein überschaubarer Anwendungsfall und messbare Qualitätsanforderungen feststehen.

FAQ

Was kostet Tamr?

Ein fester Preis ist nicht allgemein angegeben; die Kosten hängen vom vereinbarten Einsatzumfang ab. Dazu zählen etwa der gewählte Datenbereich, die nötige Anbindung und die geplante Nutzung. Unternehmen sollten den aktuellen Preis direkt beim Anbieter anfragen und dabei den eigenen Umfang beschreiben. So lässt sich ein Angebot besser mit den erwarteten Anforderungen vergleichen.

Wie lange dauert die Einführung von Tamr?

Für die Einführung gibt es keine allgemeingültige Dauer. Data Products sollen Ergebnisse in Wochen statt Monaten oder Jahren ermöglichen, doch das ist keine feste Projektzusage. Die tatsächliche Zeit hängt unter anderem von Datenzugriffen, Quellen, Qualitätszielen und nötigen Prüfungen ab. Ein kleiner, klar abgegrenzter Praxistest kann den Aufwand besser sichtbar machen.

Welche Datenquellen lassen sich mit Tamr verbinden?

Tamr kann in Google-Cloud-Umgebungen mit Diensten wie BigQuery, CloudSQL, Dataproc und BigTable arbeiten. Daraus folgt keine vollständige Liste aller möglichen Anbindungen. Für ein konkretes Vorhaben sollten Unternehmen prüfen, ob ihre Quellsysteme unterstützt werden und welche Zugriffswege nötig sind. Auch Datenformate und Zuständigkeiten können den Integrationsaufwand beeinflussen.

Können Mitarbeitende KI-Ergebnisse vor der Übernahme prüfen?

Ja, menschliche Prüfung und Feedback gehören zu einem verlässlichen Ansatz. Mitarbeitende können Ergebnisse bewerten und Korrekturen zurückmelden, bevor Daten weitergenutzt werden. Bei unklaren oder strittigen Zuordnungen sollte eine fachlich zuständige Person die Freigabe erteilen. So werden falsche Verbindungen nicht ungeprüft in Berichte oder operative Anwendungen übernommen.

Wann ist ein traditionelles Machine-Learning-Modell sinnvoller als ein Foundation Model?

Ein traditionelles Modell kann sinnvoller sein, wenn eine klar abgegrenzte Klassifikationsaufgabe schnelle Laufzeiten verlangt. Gradient Boosted Trees sind ein Beispiel. Der mögliche Laufzeitvorteil muss gegen Trainings- und Pflegeaufwand abgewogen werden, denn dafür ist oft ML-Fachwissen nötig. Foundation Models können mit wenigen passenden Beispielen angepasst werden, brauchen aber ebenfalls Prüfung.

Ähnliche Beiträge