Zitatbeleg prüfen: Was steht tatsächlich in der Quelle?
Wenn eine KI-Antwort die eigene Website als Quelle nennt, ist das zunächst eine erfreuliche Beobachtung. Wer seine Sichtbarkeit untersucht, wird diesen Verweis verständlicherweise festhalten wollen. Mich interessiert bei der Prüfung allerdings auch, was die Antwort aus der verlinkten Seite gemacht hat. Steht dort tatsächlich die Aussage, für die sie als Beleg angeführt wird, oder passt die Seite nur ungefähr zum Thema? Eine Zitation kann korrekt gezählt sein, obwohl die damit verbundene Aussage den Inhalt der Quelle falsch wiedergibt. Deswegen würde ich die Häufigkeit der Verweise und deren inhaltliche Richtigkeit getrennt beurteilen.
Ein gespeicherter Tagesplan für Lübeck
Abschnitt betitelt „Ein gespeicherter Tagesplan für Lübeck“Aus dem Vorversuch meiner Reiseplan-Erhebung für Lübeck liegt eine Antwort vom 9. August 2026 vor. Gefragt wurde nach einem Tagesplan für Montag, den 24. August 2026. Der Laufbericht dokumentiert eine API-Abfrage mit gpt-5-mini, Websuchwerkzeug, Standortvorgabe Lübeck und niedrigem Reasoning-Aufwand. Die Antwort ist ein einzelner Kalibrierungsfall und kein Ergebnis der späteren Gesamtauswertung.
Im Tagesplan ist für 13:35 bis 14:30 Uhr ein Besuch im Buddenbrookhaus vorgesehen. Die Antwort beschreibt ein Museum zur Literaturgeschichte und ergänzt:
Buddenbrookhaus ist in der Regel montags geöffnet.
Unmittelbar dahinter steht ein Link zu buddenbrookshop.de/oeffnungszeiten. Bereits der im Antwortarchiv gespeicherte Quellentitel nennt „Buddenbrooks am Markt“. Das ist für die Prüfung entscheidend, weil wir nun zwei ähnlich benannte Einrichtungen auseinanderhalten müssen.
Aussage, Linkziel und Gegenstand vergleichen
Abschnitt betitelt „Aussage, Linkziel und Gegenstand vergleichen“Die folgende Prüfung erfolgte am 9. September 2026. Ein vollständiger Seitenabzug der verlinkten Quelle vom ursprünglichen Abfragetag liegt für diesen Vergleich nicht vor. Der heutige Abruf darf deshalb nicht als rückwirkende Sicherung des damaligen Seiteninhalts ausgegeben werden.
| Prüfpunkt | Dokumentiertes Material | Einordnung |
|---|---|---|
| Genannte Einrichtung | Die gespeicherte Antwort plant einen Besuch im Buddenbrookhaus ein. | Die Öffnungsbehauptung bezieht sich im Antworttext auf das Museum. |
| Verlinkte Seite | Der Quellenmarker führt zu den Öffnungszeiten von „Buddenbrooks am Markt“. | Das Linkziel und der gespeicherte Quellentitel sind überprüfbar. |
| Gegenstand der Quelle | Beim Kontrollabruf beschreibt sich „Buddenbrooks am Markt“ als ausgelagertes Infocenter mit Museumsshop. | Seine Öffnungszeiten gelten nicht automatisch für das Museumsgebäude. |
| Museumsangabe | Die Website des Buddenbrookhauses nennt beim Kontrollabruf eine Schließung wegen Umbau. | Sie unterscheidet das geschlossene Haus von Angeboten an anderen Orten. |
| Historischer Quellenstand | Der vollständige Quellentext vom 9. August fehlt in diesem Vergleich. | Eine abschließende Rekonstruktion dessen, was das System damals lesen konnte, bleibt offen. |
Quellen für den Kontrollabruf: Buddenbrookhaus, Museumsshop und Infocenter sowie dessen Öffnungszeiten.
Der Fall zeigt, weshalb ein thematisch passender Link für die Belegprüfung noch nicht genügt. Die Einrichtungen gehören zusammen, haben aber unterschiedliche Aufgaben und Standorte. Ich würde die Öffnungsbehauptung für das Museum deshalb durch den beim Kontrollabruf vorliegenden Shop-Beleg als nicht belegt einordnen. Damit ist die Zuordnung geprüft; eine vollständige historische Ursachenanalyse oder eine Fehlerquote für das Modell ergibt sich aus diesem Einzelfall nicht.
Den Antwortausschnitt mit Erhebungsangaben kannst Du für die Nachprüfung herunterladen. Er enthält den relevanten Abschnitt und die dokumentierte Konfiguration, nicht den vollständigen Tagesplan.
Bedingungen und Zeiträume mitprüfen
Abschnitt betitelt „Bedingungen und Zeiträume mitprüfen“Auch bei der richtigen Einrichtung können wichtige Einschränkungen verloren gehen. Eine Öffnungszeit kann nur für die Sommersaison gelten, ein kostenloser Eintritt nur für eine Altersgruppe. Bei längeren Sätzen prüfe ich deshalb die einzelnen Teilbehauptungen und ihre Bedingungen. Ein übereinstimmender Name oder Zahlenwert reicht nicht, wenn sich Aussage und Quelle auf unterschiedliche Zeiträume beziehen.
Die Forschung unterscheidet ebenfalls zwischen vorhandenen Quellenverweisen und der Frage, ob diese die zugeordneten Aussagen stützen. Nelson Liu, Tianyi Zhang und Percy Liang untersuchten diese Belegbarkeit 2023 an vier generativen Suchdiensten. Ihre Untersuchung zur Verifizierbarkeit liefert einen methodischen Bezug; ihre damaligen Fehlerquoten sind keine Messung heutiger Produkte.
Was Du bei einer Abweichung dokumentierst
Abschnitt betitelt „Was Du bei einer Abweichung dokumentierst“Sichere die vollständige Antwort, die Frage, den Zeitpunkt und die sichtbare Quellenzuordnung. Dazu kommen die tatsächlich verlinkte URL, die relevante Passage und das Datum Deiner Nachprüfung. Der Referenzbogen zum Antwortkontext hilft Dir, diese Angaben zusammenzuhalten.
Ist die eigene Seite missverständlich, ergänze die fehlende Bedingung dort, wo sie zum Inhalt gehört. Ist sie bereits eindeutig, kannst Du die Abweichung mit Antwortausschnitt und Belegpassage über die Feedbackfunktion des jeweiligen Produkts melden. Ob und wann daraufhin eine Korrektur erfolgt, lässt sich damit nicht festlegen.
In der Auswertung bleibt der Quellenverweis als Zitation erhalten. Zusätzlich dokumentiere ich, ob er die Aussage vollständig, teilweise oder gar nicht belegt beziehungsweise ob die Prüfung offenbleibt. Der Nennungs- und Zitatrechner und der Quellenzähler beantworten die Mengenfragen; die inhaltliche Prüfung ergänzt diese Zahlen.
Primärquellen
- KI-Reiseplanung Lübeck · Patrick Stolp · abgerufen am · Originalveröffentlichung der Erhebung; der hier verwendete Ausschnitt stammt gesondert aus dem Vorversuch vom 09.08.2026.
- Buddenbrookhaus · Die Lübecker Museen · abgerufen am · Kontrollstand 09.09.2026: Museumsgebäude geschlossen; kein historischer Seitenabzug vom Abfragetag.
- Buddenbrooks am Markt · Die Lübecker Museen · abgerufen am · Kontrollstand 09.09.2026: ausgelagertes Infocenter mit Museumsshop, vom Museumsgebäude zu unterscheiden.
- Öffnungszeiten von Buddenbrooks am Markt · Die Lübecker Museen · abgerufen am · Kontrollstand 09.09.2026; die Shop-Zeiten belegen keinen Museumsbesuch.
- Evaluating Verifiability in Generative Search Engines · Nelson Liu, Tianyi Zhang, Percy Liang · abgerufen am · Studie von 2023 mit vier damaligen Suchdiensten; keine Aussage über aktuelle Fehlerquoten.
Verwandte Referenzen
Herausgeber und verantwortlicher Autor: Patrick Stolp · Redaktion · Impressum · Datenschutz