QA für KI-Automatisierung: Fakten prüfen und Fotos inspizieren
Ein KI-Website-Rebuild hat eine Behauptung erfunden und unpassende Fotos ausgewählt. Hier ist, was die Überprüfung der Quellen und das Öffnen der tatsächlichen Bilder ergab.
KI kann eine Website neu aufbauen, ein Videoarchiv durcharbeiten und eine Seite erstellen, die überzeugend aussieht. Sie kann jedoch auch falsche Fakten in diese Seite einbauen und Fotos auswählen, die dort nichts zu suchen haben. Mein Website-Neubau tat beides. Ich war stolz darauf, was Arya aus meinen YouTube-Videos gemacht hat, aber die Überprüfung des Ergebnisses machte Fehler sichtbar, die eine fertig aussehende Seite nicht offensichtlich gezeigt hatte.
Eine überzeugende Biografie kann dennoch eine falsche Behauptung enthalten
Auf einer Seite stand, ich hätte alle meine Kämpfe als Weißgurt gewonnen. Das war falsch: Ich habe viele Kämpfe verloren, als ich anfing. Ich habe die Formulierung korrigiert, um diese Niederlagen bei 170 lb und die späteren Siege bei 185 lb korrekt wiederzugeben.
Die nützliche Lehre hier ist, KI-Geschichtsschreibung zu überprüfen. Ein Modell kann aus einer echten Sammlung von Videos eine ungenaue Zusammenfassung erstellen. Der Satz klang wie ein sauberer Bericht über meinen Fortschritt, aber er veränderte die Aufzeichnung. Die richtige Person, das richtige Thema und eine allgemein passende Geschichte auf einer Seite zu sehen, reicht nicht aus, um festzustellen, dass jede einzelne Behauptung wahr ist.
In diesem Fall kannte ich die Geschichte und konnte den Fehler aufdecken. Für einen automatisierten Workflow deutet das auf einen konkreten Überprüfungsschritt hin: faktische Behauptungen herausziehen und mit dem Originalmaterial abgleichen. Achten Sie besonders auf absolute Aussagen wie „alle", Daten, Zahlen und Beschreibungen von Leistungen. Wenn eine Quelle die Formulierung nicht stützt, überarbeiten Sie die Behauptung, anstatt die Lücke mit einer plausiblen Geschichte zu füllen.
Bei der Fotoauswahl muss man sich die tatsächlichen Bilder ansehen
Ich habe meine Facebook-Daten heruntergeladen und mein lokales Modell gebeten, Fotos zu markieren, auf denen nur ich zu sehen bin. Die resultierende Auswahl enthielt jedoch Bilder, auf denen nicht nur ich zu sehen war. Arya hat einige davon markiert, und ich entschied, dass sie bedenkenlos verwendbar seien. Andere Auswahlen waren für die Website eindeutig falsch: ein paar Familienfotos und ein Foto von Essen.
Das sind unterschiedliche Entscheidungen. Ein Bild kann einen wörtlichen „nur ich"-Filter nicht bestehen und trotzdem akzeptabel sein, nachdem ich es überprüft habe. Ein Familienfoto kann ein valides Bild aus meinem Archiv sein und trotzdem für diese Seite ungeeignet. Ein Essensfoto kann korrekt aus den Daten abgerufen werden und trotzdem nichts zur Biografie beitragen. Eine Datei zu finden, ist nur ein Teil der Auswahl eines Assets.
Die Überprüfung erfordert das tatsächliche Foto. Ein Dateiname, die Beschreibung eines Modells oder ein Konfidenzwert können mir nicht alles sagen, was ich brauche, um zu entscheiden, ob es auf meine öffentliche Website gehört. Ich muss sehen, wer im Bild ist, was das Bild zeigt und ob es hilft, die Seite zu erklären. Auch muss die menschliche Freigabe von der anfänglichen Klassifizierung des Modells getrennt bleiben.
Fotos als Belege verwenden, ohne ihren Kontext zu erfinden
Ich habe Fotos hinzugefügt, die mich bei 170 lb und 185 lb zeigen, darunter eines aus der späteren Phase meiner Weißgurt-Zeit.
Der Blick auf diese verschiedenen Versionen von mir selbst hat mir geholfen zu überprüfen, wie die Seite meine Geschichte darstellte.
Das Bild und sein Kontext erfüllen unterschiedliche Aufgaben. Das Foto zeigt, was sichtbar ist; meine Beschreibung liefert Details wie Gewicht und Zeitraum. Ein Workflow sollte diese Quellen zusammenführen, anstatt ein Modell zu bitten, ein Datum, ein Ergebnis oder eine persönliche Geschichte allein vom Erscheinungsbild abzuleiten. Der Blick auf die Pixel ist notwendig, und die Prüfung der unterstützenden Informationen ebenso.
Aus der Überprüfung einen wiederholbaren QA-Prozess machen
Dieser Neuaufbau legt eine praktische Checkliste für die Überprüfung ähnlicher Automatisierungsarbeiten nahe:
- Überprüfen Sie die Behauptungen. Vergleichen Sie den generierten Wortlaut mit dem entsprechenden Video oder einer anderen Originalquelle. Korrigieren Sie nicht belegte Zusammenfassungen.
- Öffnen Sie die ausgewählten Assets. Prüfen Sie die Bilder selbst, anstatt die Auswahlliste als Beleg zu akzeptieren.
- Berücksichtigen Sie den Zweck der Seite. Entscheiden Sie, ob jedes Foto für die öffentliche Verwendung relevant und angemessen ist, einschließlich der Personen, die sonst noch darauf zu sehen sind.
- Überprüfen Sie die fertige Seite. Lesen Sie den korrigierten Text zusammen mit den ausgewählten Fotos, damit das zusammengeführte Ergebnis die belegte Geschichte erzählt.
Diese Checkliste ist die Workflow-Lektion aus der Überprüfung, nicht die Behauptung, dass die ursprüngliche Automatisierung bereits jeden Schritt ausgeführt hätte. Die Automatisierung hat eine Menge nützlicher Arbeit geleistet. Die sachliche Korrektur und die unpassenden Fotoauswahlen zeigen, warum die Qualitätssicherung ihre Ergebnisse direkt prüfen muss, bevor sie diese Arbeit als abgeschlossen betrachtet.
Quelle: Originalvideo, 1:03:05–1:07:25.