Wann du Claudes Antworten auf Fakten prüfst (und wann nicht)
5 Min. Lesezeit
Viele behandeln jede Antwort von Claude mit demselben Vertrauensniveau, entweder akzeptieren sie alles unbesehen oder prüfen aus allgemeiner Vorsicht alles doppelt. Beides ist für das meiste, was tatsächlich zurückkommt, die falsche Dosis an Kontrolle. Die nützliche Fähigkeit ist nicht, mehr oder weniger zu vertrauen, sondern zu wissen, welche konkreten Teile einer Antwort eine unabhängige Prüfung brauchen und welche nicht.
Häufiger Fehler
Zu beurteilen, wie sehr man einer Antwort traut, daran, wie selbstsicher sie klingt. Claude nennt einen richtigen und einen falschen Fakt im selben ruhigen Ton, sodass Selbstsicherheit im Text nichts über Genauigkeit aussagt.
Die Frage ist nicht, ob Claude vertrauenswürdig ist. Es ist, welche konkreten Behauptungen in dieser konkreten Antwort anhand von etwas außerhalb des Gesprächs geprüft werden müssen.
Was meist eine zweite Prüfung braucht
Manche Kategorien von Behauptungen bergen echtes Risiko, wenn sie falsch sind, und sollten jedes Mal unabhängig geprüft werden.
Exakte Zahlen und Daten: eine Statistik, ein Prozentsatz, eine Frist, alles, wobei „nah dran“ nicht dasselbe ist wie „richtig“
Direkte Zitate oder Quellenangaben: ein zitierter Satz, der einer Person oder Quelle zugeschrieben wird und genau mit dem Original übereinstimmen muss
Alles zu sehr aktuellen Ereignissen: Nachrichten, Preise oder Details, die sich nach der Erhebung von Claudes Trainingsdaten geändert haben könnten
Einzelheiten in folgenreichen Bereichen: juristische, medizinische oder finanzielle Angaben, bei denen ein Fehler eine echte Folge hat, nicht nur Unannehmlichkeit
Nichts davon heißt, dass die Antwort wahrscheinlich falsch ist. Es heißt, dass die Kosten eines unentdeckten Fehlers hoch genug sind, damit sich die zusätzliche Minute des Prüfens lohnt, egal wie selbstsicher die Antwort klang.
Was sich meist so übernehmen lässt
Die Kehrseite zählt genauso, denn alles mit gleichem Misstrauen zu behandeln ist eine eigene Ineffizienz. Struktur, Ton und ein erster Durchgang zum Ordnen deiner eigenen Informationen sind risikoarm, da es nichts Äußeres gibt, was falsch sein könnte. Hast du Claude deine eigenen Notizen gegeben und darum gebeten, sie nach Themen zu ordnen, ist das nur dann „falsch“, wenn es wiedergibt, was du geschrieben hast, verfälscht, was sich beim einmaligen Lesen leicht erkennen lässt.
Hier sind meine Notizen aus fünf Kundengesprächen. Gruppiere sie in die drei häufigsten Themen und zitiere für jedes Thema eine Zeile aus den Notizen, damit ich sie mit dem abgleichen kann, was tatsächlich gesagt wurde.
”Die zitierte Quelle zusammen mit der Zusammenfassung zu verlangen, wie in diesem Beispiel, lohnt sich als Standard. Es macht aus „vertrau der Zusammenfassung“ ein „gleiche die Zusammenfassung mit dem Zitat direkt daneben ab“, was Sekunden dauert und eine Fehllesung viel schneller findet, als alle fünf Gespräche selbst erneut durchzugehen.
In Claude Tutorial
Das ist eine der am besten übertragbaren Gewohnheiten in der App.
Zu wissen, welche Teile einer Antwort zu prüfen und welche so zu übernehmen sind, gilt für fast alles, wofür du Claude einsetzt. Die App hat dazu eine vollständige Lektion über das Kalibrieren von Vertrauen, mit Übungen über verschiedene Arten von Aufgaben.
Claude bitten, die eigene Unsicherheit zu markieren
Über das eigene Prüfen der Kategorien hinaus kannst du direkt fragen, bei welchen Teilen einer Antwort Claude am wenigsten sicher ist. Das ersetzt dein eigenes Urteil nicht, ist aber ein schneller Weg zu erfahren, wo du eine Prüfung ansetzen solltest, statt die ganze Antwort als gleich unsicher zu behandeln.
Von den fünf Behauptungen in deiner Antwort oben: Bei welcher bist du am wenigsten sicher, dass sie stimmt, und warum? Sei konkret, was falsch sein könnte.
”Das funktioniert besser als ein allgemeines „bist du sicher“, das meist eine reflexhafte Beruhigung erhält. Nach der einen schwächsten Behauptung zu fragen erzwingt eine echte Antwort, da kein Raum bleibt, einfach das Vertrauen in alles zugleich zu bekräftigen.
Die Prüfung in die Anfrage selbst einbauen
Die effizienteste Form dieser Gewohnheit ist, die Prüfung in deinen ersten Prompt einzubauen, statt sie nachträglich hinzuzufügen. Weißt du, dass eine Aufgabe eine Kategorie berührt, die Überprüfung braucht, sag das vorab und bitte Claude, diese Stellen beim Schreiben zu markieren.
Entwirf dieses Kunden-Update und markiere mit [PRÜFEN] jeden Satz, der eine konkrete Zahl, ein Datum oder einen Fakt nennt, den ich vor dem Versand noch einmal prüfen sollte.
”Diese eine Anweisung macht aus einem vollständigen Nachlesen einen Durchlauf über eine Handvoll markierter Stellen, eine viel kleinere Aufgabe, die du tatsächlich konsequent erledigst, statt die Prüfung zu überspringen, wenn du in Eile bist.
Wenn ein Dokument beide Arten von Behauptungen mischt
Die meisten echten Dokumente gehören nicht sauber zu einer Kategorie. Ein Kundenbericht kann zum großen Teil organisatorische Prosa sein, risikoarm, neben drei konkreten Zahlen aus einer Tabelle, risikoreich. Das ganze Dokument mit einem einzigen Kontrollniveau zu behandeln verschwendet entweder Zeit mit dem erneuten Prüfen der sicheren Teile oder überspringt die Prüfung der riskanten.
Die Lösung ist, Claude zu bitten, die beiden Kategorien ausdrücklich zu trennen, statt das Dokument als undifferenzierten Block zu prüfen.
Geh diesen Berichtsentwurf durch und liste jede konkrete Zahl, jedes Datum und jede Statistik auf, die er nennt, getrennt vom Rest der Prosa. Ich möchte eine kurze Liste, die ich mit meinen Quelldaten abgleichen kann, nicht das ganze Dokument neu geschrieben.
”Diese Bitte macht aus einem Bericht mit 12 Absätzen eine kurze Liste von fünf oder sechs Dingen, die sich wirklich zu prüfen lohnen, was ein paar Minuten dauert statt eines vollständigen Nachlesens. Der Rest des Dokuments, die Teile, die diese Zahlen erklären und ordnen, kann auf demselben Niveau übernommen werden wie jede andere Prosa eines ersten Entwurfs.
Weiterlesen
- Deine eigene Arbeit mit Claude prüfen, bevor sie jemand anderes sieht: eine strukturelle Prüfung deines eigenen Entwurfs, die sich gut mit einer faktischen Prüfung obendrauf verbindet.
- Einen Claude-Workflow aufbauen, den du jede Woche wiederverwenden kannst: aus der Überprüfung einen Schritt eines gespeicherten Workflows machen statt eines einmaligen Gedankens.