Datenbereiniger: Unterschied zwischen den Versionen

Aus Winestro.Cloud Handbuch
Zur Navigation springen Zur Suche springen
Keine Bearbeitungszusammenfassung
Zeile 6: Zeile 6:
[[Datei:Bereinigung1.png | miniatur | right | Hier geht es los]]
[[Datei:Bereinigung1.png | miniatur | right | Hier geht es los]]
Um den Bereiniger zu starten, erstelle eine [[Selektion]] mit den Kundendaten, die du bereinigen willst. Im letzten Schritt kannst Du im Reiter "Daten" den AI-Bereiniger starten. Der Bereiniger zieht jetzt ein Abbild der Selektion, das so lange bestehen bleibt, bis du ihn mit einer neuen Selektion startest oder die Daten löschst. So kannst Du auch immer mal wieder Daten bereinigen, da gerade bei großen Datensätzen die Aufarbeitung einige Stunden in Anspruch nehmen kann. Nach der Initialisierung des Bereinigers kannst Du auch immer wieder über das Menü über Dienste / AI-Werkzeuge / Daten-Cleaner auf die Liste gehen und dort weiter machen!
Um den Bereiniger zu starten, erstelle eine [[Selektion]] mit den Kundendaten, die du bereinigen willst. Im letzten Schritt kannst Du im Reiter "Daten" den AI-Bereiniger starten. Der Bereiniger zieht jetzt ein Abbild der Selektion, das so lange bestehen bleibt, bis du ihn mit einer neuen Selektion startest oder die Daten löschst. So kannst Du auch immer mal wieder Daten bereinigen, da gerade bei großen Datensätzen die Aufarbeitung einige Stunden in Anspruch nehmen kann. Nach der Initialisierung des Bereinigers kannst Du auch immer wieder über das Menü über Dienste / AI-Werkzeuge / Daten-Cleaner auf die Liste gehen und dort weiter machen!
=== Neustart ===
Wenn Du die Liste neu Laden möchtest, klicke oben Rechts auf "Daten neu laden". Das zieht die Kundeninfos aus deiner Selektion erneut.


== Manuelles bereinigen ==
== Manuelles bereinigen ==
[[Datei:Bereinigung2.png | miniatur | right | Felder für das manuelle bereinigen]]
In der Liste des AI-Bereinigers siehst du nun links einmal die Daten so, wie sie in deiner Datenbank bei Winestro enthalten sind zur Kontrolle. Rechts siehst du die Daten, die gerade im Bereiniger zwischengespeichert sind. Die die Markieren Felder (vgl. Bild) kannst Du nun selbst Werte eintragen - wenn Du mit den Daten zufrieden bist, kannst Du rechts auf "Speichern" klicken und die Daten in der Datenbank werden mit den Daten aus den Feldern überschrieben und die Zeile wird ausgeblendet. So kannst du dich manuell durch die Liste arbeiten und schnell Daten korrigieren. 
=== Daten speichern automatisch zwischen ===
Wenn Du ein Feld änderst, werden die Daten automatisch zwischengespeichert - das hat keine Auswirkung auf Deine Ursprungs-Daten! Das siehst Du daran, dass das Feld bei Bearbeitung gelb wird und dann wieder weiß. Erst wenn Du auf "Speichern" klickst, werden die Daten dauerhaft in deiner Winestro-Datenbank gespeichert und die Original-Daten werden überschrieben.
== Bereinigen mit Chat-GPT Unterstützung ==
Du findest Links zwei Schaltflächen für zwei Aktionen. Diese übermitteln jeweils 5 Datensätze an Chat-GPT4 von OpenAI und bittet um Bereinigung der Daten. Um die Komplexität zu verringern und die Geschwindigkeit zu erhöhen ist die Datenverarbeitung in zwei Schritte unterteilt:
# Stufe NEU: Filtert alle Namensteile aus "Firma" und schreibt sie in "Vorname" und "Nachnam" und entfernt sie ggf. aus "Firma"
# Stude FIRMA: Berücksichtig nur Felder, die mit ChatGPT schon initial bereinigt wurden. Auf Grundlage der Namen wird eine Briefanrede (z.B. Sehr geehrter Herr) und eine Adressanrede (z.B. Frau) angelegt.
Während einer Anfrage an GPT sind die Felder nicht bearbeitbar.
Bitt beachte, dass die Abfragedauer von der Auslastung des Dienstes abhängt und
Du das Ergebnis in jedem Fall kontrollieren solltest.
=== Hybrides Arbeiten ===
Natürlich kannst Du GPT über einige Felder laufen lassen und schon mal einige Datensätze in 2 Schritten bereinigen lassen. GPT stoppt automatisch, sobald keine Daten mehr für eine Stufe zu bereinigen sind.

Version vom 22. November 2023, 12:15 Uhr


Update Bearbeitung.png Dieser Artikel behandelt einen Programmteil, der erst mit einem der nächsten Updates verfügbar sein wird.

Der Datenbereiniger ist ein Werkzeug um Kundendaten im Bezug auf das Feld Firma zu bereinigen. Gerade bei Übernahmen aus Alt-Programmen oder Excel-Listen kommt es vor, dass Namensteile und Firmennamen in den Feldern Firma, Name und Nachname unstrukturiert verteilt sind. Währen wir die meisten Daten wie z.B. Straße und Hausnummer nach logischen Kriterien auftretennen können, gibt es für die Fälle der Namensteile und Anreden leider keinen vollautomatischen Automatismus, der das Problem löst. Gut gepflegte Daten sind aber eine wichtige Vorraussetzung für gezielte Kundenansprache oder Selektionen. Um die Bereinigung von Daten zu untersützen gibt es den AI-Datenbereiniger, der wahlweise mit oder ohne die Hilfe von KI genutzt werden kann.

Starten des Bereinigers

Hier geht es los

Um den Bereiniger zu starten, erstelle eine Selektion mit den Kundendaten, die du bereinigen willst. Im letzten Schritt kannst Du im Reiter "Daten" den AI-Bereiniger starten. Der Bereiniger zieht jetzt ein Abbild der Selektion, das so lange bestehen bleibt, bis du ihn mit einer neuen Selektion startest oder die Daten löschst. So kannst Du auch immer mal wieder Daten bereinigen, da gerade bei großen Datensätzen die Aufarbeitung einige Stunden in Anspruch nehmen kann. Nach der Initialisierung des Bereinigers kannst Du auch immer wieder über das Menü über Dienste / AI-Werkzeuge / Daten-Cleaner auf die Liste gehen und dort weiter machen!

Neustart

Wenn Du die Liste neu Laden möchtest, klicke oben Rechts auf "Daten neu laden". Das zieht die Kundeninfos aus deiner Selektion erneut.

Manuelles bereinigen

Felder für das manuelle bereinigen

In der Liste des AI-Bereinigers siehst du nun links einmal die Daten so, wie sie in deiner Datenbank bei Winestro enthalten sind zur Kontrolle. Rechts siehst du die Daten, die gerade im Bereiniger zwischengespeichert sind. Die die Markieren Felder (vgl. Bild) kannst Du nun selbst Werte eintragen - wenn Du mit den Daten zufrieden bist, kannst Du rechts auf "Speichern" klicken und die Daten in der Datenbank werden mit den Daten aus den Feldern überschrieben und die Zeile wird ausgeblendet. So kannst du dich manuell durch die Liste arbeiten und schnell Daten korrigieren.

Daten speichern automatisch zwischen

Wenn Du ein Feld änderst, werden die Daten automatisch zwischengespeichert - das hat keine Auswirkung auf Deine Ursprungs-Daten! Das siehst Du daran, dass das Feld bei Bearbeitung gelb wird und dann wieder weiß. Erst wenn Du auf "Speichern" klickst, werden die Daten dauerhaft in deiner Winestro-Datenbank gespeichert und die Original-Daten werden überschrieben.

Bereinigen mit Chat-GPT Unterstützung

Du findest Links zwei Schaltflächen für zwei Aktionen. Diese übermitteln jeweils 5 Datensätze an Chat-GPT4 von OpenAI und bittet um Bereinigung der Daten. Um die Komplexität zu verringern und die Geschwindigkeit zu erhöhen ist die Datenverarbeitung in zwei Schritte unterteilt:

  1. Stufe NEU: Filtert alle Namensteile aus "Firma" und schreibt sie in "Vorname" und "Nachnam" und entfernt sie ggf. aus "Firma"
  2. Stude FIRMA: Berücksichtig nur Felder, die mit ChatGPT schon initial bereinigt wurden. Auf Grundlage der Namen wird eine Briefanrede (z.B. Sehr geehrter Herr) und eine Adressanrede (z.B. Frau) angelegt.
Während einer Anfrage an GPT sind die Felder nicht bearbeitbar. 
Bitt beachte, dass die Abfragedauer von der Auslastung des Dienstes abhängt und
Du das Ergebnis in jedem Fall kontrollieren solltest.

Hybrides Arbeiten

Natürlich kannst Du GPT über einige Felder laufen lassen und schon mal einige Datensätze in 2 Schritten bereinigen lassen. GPT stoppt automatisch, sobald keine Daten mehr für eine Stufe zu bereinigen sind.