{"id":325701,"date":"2026-09-05T05:05:36","date_gmt":"2026-09-05T02:05:36","guid":{"rendered":"https:\/\/ceotudent.com\/warum-ki-halluziniert-mechanik-der-modellfehler-frueh-erkennen"},"modified":"2026-09-05T05:05:36","modified_gmt":"2026-09-05T02:05:36","slug":"warum-ki-halluziniert-mechanik-der-modellfehler-frueh-erkennen","status":"publish","type":"post","link":"https:\/\/ceotudent.com\/de\/warum-ki-halluziniert-mechanik-der-modellfehler-frueh-erkennen","title":{"rendered":"Warum KI halluziniert: die Mechanik der Modellfehler und wie man sie fr\u00fch erkennt"},"content":{"rendered":"<p><strong>Kurzfassung.<\/strong> Ein Sprachmodell, das eine Quelle erfindet, funktioniert nicht falsch. Es tut genau das, wof\u00fcr es bewertet wurde. Im September 2025 ver\u00f6ffentlichten vier Forschende, drei bei OpenAI und einer an der Georgia Tech, ein Argument daf\u00fcr, dass Halluzination \u00fcberlebt, weil Modelle so benotet werden: Auf einer bin\u00e4ren Richtig-oder-falsch-Skala schl\u00e4gt ein ratendes Modell immer ein identisches Modell, das Unsicherheit eingesteht. Sie untersuchten zehn f\u00fchrende Evaluationen und fanden, dass neun bin\u00e4r benoten und keine einzige volle Punkte f\u00fcr ein kalibriertes &ldquo;Ich wei\u00df es nicht&rdquo; vergibt. Wir haben OpenAIs eigene SimpleQA-Ergebnisse genommen und eine Spalte berechnet, die das Papier nicht ausweist: die Bluffquote, also den Anteil der Fehlschl\u00e4ge, bei denen das Modell falsch antwortete statt abzuwinken. Sie reicht von 20,5% bis 99,0%, eine Spanne von 4,8, und ist von der Genauigkeit weitgehend unabh\u00e4ngig. Anschlie\u00dfend pr\u00fcften wir die am 11. Mai 2026 aktualisierte Halluzinations-Bestenliste von Vectara darauf, was geschieht, wenn die Fakten im Prompt geliefert werden. Die Erdung hilft erheblich, brachte aber ein Ergebnis, das wir nicht erwartet hatten: In vier getrennten Vergleichen innerhalb derselben Familie erh\u00f6hte mehr Denkaufwand die Halluzinationsrate, und die Zusammenfassungen wurden ausnahmslos l\u00e4nger. Es folgen: die f\u00fcnf belegten Mechanismen, in welchem Regime Ihre Aufgabe liegt, und f\u00fcr jeden ein Erkennungstest.<\/p>\n<p>Dies ist die mechanische Ebene unter unseren Arbeiten zum <a href=\"https:\/\/ceotudent.com\/en\/the-evaluation-skill-judging-ai-output\">Beurteilen von KI-Ausgaben<\/a> und zur <a href=\"https:\/\/ceotudent.com\/en\/trust-calibration-when-to-trust-ai-recommendations\">Vertrauenskalibrierung<\/a>. Jene Texte sagen, wann man vertrauen sollte. Dieser sagt, warum die Fehler dort auftreten, wo sie auftreten.<\/p>\n<div id=\"ez-toc-container\" class=\"ez-toc-v2_0_84 counter-hierarchy ez-toc-counter ez-toc-grey ez-toc-container-direction\">\n<div class=\"ez-toc-title-container\">\n<p class=\"ez-toc-title\" style=\"cursor:inherit\">Table of Contents<\/p>\n<span class=\"ez-toc-title-toggle\"><a href=\"#\" class=\"ez-toc-pull-right ez-toc-btn ez-toc-btn-xs ez-toc-btn-default ez-toc-toggle\" aria-label=\"Toggle Table of Content\"><span class=\"ez-toc-js-icon-con\"><span class=\"\"><span class=\"eztoc-hide\" style=\"display:none;\">Toggle<\/span><span class=\"ez-toc-icon-toggle-span\"><svg style=\"fill: #999;color:#999\" xmlns=\"http:\/\/www.w3.org\/2000\/svg\" class=\"list-377408\" width=\"20px\" height=\"20px\" viewBox=\"0 0 24 24\" fill=\"none\"><path d=\"M6 6H4v2h2V6zm14 0H8v2h12V6zM4 11h2v2H4v-2zm16 0H8v2h12v-2zM4 16h2v2H4v-2zm16 0H8v2h12v-2z\" fill=\"currentColor\"><\/path><\/svg><svg style=\"fill: #999;color:#999\" class=\"arrow-unsorted-368013\" xmlns=\"http:\/\/www.w3.org\/2000\/svg\" width=\"10px\" height=\"10px\" viewBox=\"0 0 24 24\" version=\"1.2\" baseProfile=\"tiny\"><path d=\"M18.2 9.3l-6.2-6.3-6.2 6.3c-.2.2-.3.4-.3.7s.1.5.3.7c.2.2.4.3.7.3h11c.3 0 .5-.1.7-.3.2-.2.3-.5.3-.7s-.1-.5-.3-.7zM5.8 14.7l6.2 6.3 6.2-6.3c.2-.2.3-.5.3-.7s-.1-.5-.3-.7c-.2-.2-.4-.3-.7-.3h-11c-.3 0-.5.1-.7.3-.2.2-.3.5-.3.7s.1.5.3.7z\"\/><\/svg><\/span><\/span><\/span><\/a><\/span><\/div>\n<nav><ul class='ez-toc-list ez-toc-list-level-1 ' ><li class='ez-toc-page-1 ez-toc-heading-level-2'><a class=\"ez-toc-link ez-toc-heading-1\" href=\"https:\/\/ceotudent.com\/de\/warum-ki-halluziniert-mechanik-der-modellfehler-frueh-erkennen\/#Die-Antwort-in-einem-Satz\" >Die Antwort in einem Satz<\/a><\/li><li class='ez-toc-page-1 ez-toc-heading-level-2'><a class=\"ez-toc-link ez-toc-heading-2\" href=\"https:\/\/ceotudent.com\/de\/warum-ki-halluziniert-mechanik-der-modellfehler-frueh-erkennen\/#Die-Bluffquote-eine-eigene-Spalte\" >Die Bluffquote: eine eigene Spalte<\/a><\/li><li class='ez-toc-page-1 ez-toc-heading-level-2'><a class=\"ez-toc-link ez-toc-heading-3\" href=\"https:\/\/ceotudent.com\/de\/warum-ki-halluziniert-mechanik-der-modellfehler-frueh-erkennen\/#Das-zweite-Regime-was-passiert-wenn-Sie-die-Fakten-liefern\" >Das zweite Regime: was passiert, wenn Sie die Fakten liefern<\/a><\/li><li class='ez-toc-page-1 ez-toc-heading-level-2'><a class=\"ez-toc-link ez-toc-heading-4\" href=\"https:\/\/ceotudent.com\/de\/warum-ki-halluziniert-mechanik-der-modellfehler-frueh-erkennen\/#Der-unerwartete-Befund-mehr-Denkaufwand-verschlechtert-die-Halluzination-bei-vorgelegten-Quellen\" >Der unerwartete Befund: mehr Denkaufwand verschlechtert die Halluzination bei vorgelegten Quellen<\/a><\/li><li class='ez-toc-page-1 ez-toc-heading-level-2'><a class=\"ez-toc-link ez-toc-heading-5\" href=\"https:\/\/ceotudent.com\/de\/warum-ki-halluziniert-mechanik-der-modellfehler-frueh-erkennen\/#Die-fuenf-Mechanismen-und-wie-sie-aussehen\" >Die f\u00fcnf Mechanismen und wie sie aussehen<\/a><\/li><li class='ez-toc-page-1 ez-toc-heading-level-2'><a class=\"ez-toc-link ez-toc-heading-6\" href=\"https:\/\/ceotudent.com\/de\/warum-ki-halluziniert-mechanik-der-modellfehler-frueh-erkennen\/#Ein-praktikables-Vorgehen\" >Ein praktikables Vorgehen<\/a><\/li><li class='ez-toc-page-1 ez-toc-heading-level-2'><a class=\"ez-toc-link ez-toc-heading-7\" href=\"https:\/\/ceotudent.com\/de\/warum-ki-halluziniert-mechanik-der-modellfehler-frueh-erkennen\/#Was-das-nicht-bedeutet\" >Was das nicht bedeutet<\/a><\/li><li class='ez-toc-page-1 ez-toc-heading-level-2'><a class=\"ez-toc-link ez-toc-heading-8\" href=\"https:\/\/ceotudent.com\/de\/warum-ki-halluziniert-mechanik-der-modellfehler-frueh-erkennen\/#Haeufig-gestellte-Fragen\" >H\u00e4ufig gestellte Fragen<\/a><\/li><li class='ez-toc-page-1 ez-toc-heading-level-2'><a class=\"ez-toc-link ez-toc-heading-9\" href=\"https:\/\/ceotudent.com\/de\/warum-ki-halluziniert-mechanik-der-modellfehler-frueh-erkennen\/#Quellen\" >Quellen<\/a><\/li><\/ul><\/nav><\/div>\n<h2 id=\"die-antwort-in-einem-satz\"><span class=\"ez-toc-section\" id=\"Die-Antwort-in-einem-Satz\"><\/span>Die Antwort in einem Satz<span class=\"ez-toc-section-end\"><\/span><\/h2>\n<p>Modelle halluzinieren, weil Raten besser bewertet wird als Abwinken, und alles \u00dcbrige ist ein Detail dar\u00fcber, wann.<\/p>\n<p>Diese Rahmung stammt aus &ldquo;Why Language Models Hallucinate&rdquo;, am 4. September 2025 auf arXiv eingestellt von Adam Tauman Kalai und Ofir Nachum von OpenAI, Santosh S. Vempala von der Georgia Tech und Edwin Zhang von OpenAI. Ihre Analogie ist ein Pr\u00fcfling. Bei einer Frage, die Sie nicht beantworten k\u00f6nnen, bringt eine Leerstelle null Punkte, eine Vermutung null oder einen. Unter dieser Regel ist Raten stets die rationale Strategie, und zwar spezifisches Raten, denn &ldquo;30. September&rdquo; und &ldquo;irgendwann im Herbst&rdquo; werden gleich bewertet, wenn beide falsch sind, aber nur das Erste kann richtig sein.<\/p>\n<p>Sprachmodelle, so das Argument, leben dauerhaft in dieser Pr\u00fcfung. Sie werden gegen Benchmarks optimiert, die standardisierte Tests nachbilden, und befinden sich deshalb st\u00e4ndig im Pr\u00fcfungsmodus.<\/p>\n<p>Der konkreteste Beitrag des Papiers ist eine Bestandsaufnahme dessen, was die Benchmarks tats\u00e4chlich tun. Die Autoren untersuchten zehn verbreitete Evaluationen und ordneten jede danach ein, ob ihre Prim\u00e4rmetrik strikte Richtig-falsch-Genauigkeit ist und ob ein Abwinken \u00fcberhaupt Punkte erhalten kann.<\/p>\n<table>\n<thead>\n<tr>\n<th>Benchmark<\/th>\n<th>Bewertungsmethode<\/th>\n<th>Bin\u00e4re Benotung<\/th>\n<th>Punkte f\u00fcr &ldquo;Ich wei\u00df es nicht&rdquo;<\/th>\n<\/tr>\n<\/thead>\n<tbody>\n<tr>\n<td>GPQA<\/td>\n<td>Multiple-Choice-Genauigkeit<\/td>\n<td>Ja<\/td>\n<td>Keine<\/td>\n<\/tr>\n<tr>\n<td>MMLU-Pro<\/td>\n<td>Multiple-Choice-Genauigkeit<\/td>\n<td>Ja<\/td>\n<td>Keine<\/td>\n<\/tr>\n<tr>\n<td>IFEval<\/td>\n<td>Programmatische Anweisungspr\u00fcfung<\/td>\n<td>Ja<\/td>\n<td>Keine<\/td>\n<\/tr>\n<tr>\n<td>Omni-MATH<\/td>\n<td>\u00c4quivalenzbewertung<\/td>\n<td>Ja<\/td>\n<td>Keine<\/td>\n<\/tr>\n<tr>\n<td>WildBench<\/td>\n<td>Durch Sprachmodell bewertete Rubrik<\/td>\n<td>Nein<\/td>\n<td>Teilweise<\/td>\n<\/tr>\n<tr>\n<td>BBH<\/td>\n<td>Multiple Choice \/ exakter Abgleich<\/td>\n<td>Ja<\/td>\n<td>Keine<\/td>\n<\/tr>\n<tr>\n<td>MATH (Stufe-5-Teilmenge)<\/td>\n<td>\u00c4quivalenzbewertung<\/td>\n<td>Ja<\/td>\n<td>Keine<\/td>\n<\/tr>\n<tr>\n<td>MuSR<\/td>\n<td>Multiple-Choice-Genauigkeit<\/td>\n<td>Ja<\/td>\n<td>Keine<\/td>\n<\/tr>\n<tr>\n<td>SWE-bench<\/td>\n<td>Patch besteht Unit-Tests<\/td>\n<td>Ja<\/td>\n<td>Keine<\/td>\n<\/tr>\n<tr>\n<td>HLE<\/td>\n<td>Multiple Choice \/ \u00c4quivalenzbewertung<\/td>\n<td>Ja<\/td>\n<td>Keine<\/td>\n<\/tr>\n<\/tbody>\n<\/table>\n<p><em>Quelle: Kalai, Nachum, Vempala und Zhang, &ldquo;Why Language Models Hallucinate&rdquo;, arXiv-Preprint 2509.04664v1, September 2025, Tabelle 2. Unsere Ausz\u00e4hlung ihrer Zeilen: 9 von 10 benoten bin\u00e4r, 9 von 10 geben keine Punkte f\u00fcr Abwinken, 0 von 10 geben volle Punkte f\u00fcr ein kalibriertes Abwinken. Die Rubrik von WildBench bietet nur Teilpunkte, und die Autoren merken an, dass die Skala von 1 bis 10 ein Abwinken weiterhin schlechter bewerten kann als eine selbstbewusste, aber halluzinierte Antwort.<\/em><\/p>\n<p>Diese letzte Zeile enth\u00e4lt das ganze Problem im Kleinen. Selbst der eine Benchmark, der nicht bin\u00e4r benotet, kann eine selbstbewusste Unwahrheit \u00fcber ein ehrliches &ldquo;Ich wei\u00df es nicht&rdquo; stellen.<\/p>\n<p>Der vorgeschlagene Ausweg ist kein neuer Halluzinations-Benchmark, sondern eine \u00c4nderung der Bewertung jener Benchmarks, die die Bestenlisten ohnehin dominieren: Die Anweisung soll eine Konfidenzschwelle nennen. Antworte nur, wenn du zu mehr als t sicher bist, denn Fehler werden mit t\/(1-t) Punkten bestraft, richtige Antworten erhalten 1 Punkt, und &ldquo;Ich wei\u00df es nicht&rdquo; erh\u00e4lt 0.<\/p>\n<p>Eine Anmerkung zu dieser Formel f\u00fcr alle, die nachrechnen. Der Preprint nennt als nat\u00fcrliche Werte t = 0,5 (Strafe 1), t = 0,75 (Strafe 2) und t = 0,9 (Strafe 9). Wendet man die im Papier selbst angegebene Formel t\/(1-t) an, ergibt sich 1 f\u00fcr t = 0,5 und 9 f\u00fcr t = 0,9, beides stimmig, aber 3 f\u00fcr t = 0,75, nicht 2. Der Klammerwert f\u00fcr den mittleren Fall widerspricht der Formel, die er begleitet. Das ist ein kleiner Ausrutscher in einem sonst sorgf\u00e4ltigen Preprint und \u00e4ndert nichts am Argument. Wir weisen darauf hin, weil es genau die Art abgeleiteter Zahl ist, deren Nachrechnen dieser Beitrag empfiehlt, und die Lektion endet nicht bei Papieren aus Spitzenlaboren. Die Beobachtung bezieht sich auf Version 1 des arXiv-Preprints vom 4. September 2025; sp\u00e4ter ver\u00f6ffentlichte Fassungen k\u00f6nnen abweichen.<\/p>\n<h2 id=\"die-bluffquote-eine-eigene-spalte\"><span class=\"ez-toc-section\" id=\"Die-Bluffquote-eine-eigene-Spalte\"><\/span>Die Bluffquote: eine eigene Spalte<span class=\"ez-toc-section-end\"><\/span><\/h2>\n<p>Hier wird die Theorie messbar.<\/p>\n<p>OpenAI ver\u00f6ffentlichte im November 2024 SimpleQA, einen Benchmark aus 4.326 kurzen Faktenfragen, die f\u00fcr GPT-4o schwierig sein sollten und jeweils genau eine unstrittige Antwort haben. Die Bewertung kennt drei statt zwei Ausg\u00e4nge: richtig, falsch und nicht versucht, wobei die letzte Kategorie Antworten umfasst, die die Referenzantwort nicht vollst\u00e4ndig geben, einschlie\u00dflich eines klaren &ldquo;Ich wei\u00df es nicht&rdquo;.<\/p>\n<p>Diese dritte Kategorie macht den Datensatz hier n\u00fctzlich, denn sie trennt zwei Dinge, die bin\u00e4re Benchmarks verschmelzen: etwas nicht zu wissen und so zu tun, als w\u00fcsste man es.<\/p>\n<p>Die ver\u00f6ffentlichte Tabelle weist f\u00fcr acht Modelle richtig, nicht versucht und falsch aus. Sie weist nicht das Verh\u00e4ltnis aus, das f\u00fcr Berufst\u00e4tige am meisten z\u00e4hlt. Wenn ein Modell Sie im Stich l\u00e4sst, wie sieht dieses Scheitern aus? Sagt es Ihnen, dass es nichts wei\u00df, oder reicht es Ihnen mit unbewegter Miene etwas Falsches?<\/p>\n<p>Das ist eine einzige Division: falsch geteilt durch die Summe aus falsch und nicht versucht. Wir haben sie f\u00fcr jede Zeile berechnet.<\/p>\n<table>\n<thead>\n<tr>\n<th>Modell<\/th>\n<th>Richtig (%)<\/th>\n<th>Nicht versucht (%)<\/th>\n<th>Falsch (%)<\/th>\n<th>Bluffquote (%)<\/th>\n<\/tr>\n<\/thead>\n<tbody>\n<tr>\n<td>GPT-4o-mini<\/td>\n<td>8,6<\/td>\n<td>0,9<\/td>\n<td>90,5<\/td>\n<td>99,0<\/td>\n<\/tr>\n<tr>\n<td>GPT-4o<\/td>\n<td>38,2<\/td>\n<td>1,0<\/td>\n<td>60,8<\/td>\n<td>98,4<\/td>\n<\/tr>\n<tr>\n<td>OpenAI o1-preview<\/td>\n<td>42,7<\/td>\n<td>9,2<\/td>\n<td>48,1<\/td>\n<td>83,9<\/td>\n<\/tr>\n<tr>\n<td>OpenAI o1-mini<\/td>\n<td>8,1<\/td>\n<td>28,5<\/td>\n<td>63,4<\/td>\n<td>69,0<\/td>\n<\/tr>\n<tr>\n<td>Claude-3.5-sonnet (2024-06-20)<\/td>\n<td>28,9<\/td>\n<td>35,0<\/td>\n<td>36,1<\/td>\n<td>50,8<\/td>\n<\/tr>\n<tr>\n<td>Claude-3-opus (2024-02-29)<\/td>\n<td>23,5<\/td>\n<td>39,6<\/td>\n<td>36,9<\/td>\n<td>48,2<\/td>\n<\/tr>\n<tr>\n<td>Claude-3-haiku (2024-03-07)<\/td>\n<td>5,1<\/td>\n<td>75,3<\/td>\n<td>19,6<\/td>\n<td>20,7<\/td>\n<\/tr>\n<tr>\n<td>Claude-3-sonnet (2024-02-29)<\/td>\n<td>5,7<\/td>\n<td>75,0<\/td>\n<td>19,3<\/td>\n<td>20,5<\/td>\n<\/tr>\n<\/tbody>\n<\/table>\n<p><em>CEOtudent-Redaktionsrahmen. Die Spalten richtig, nicht versucht und falsch sind w\u00f6rtlich \u00fcbernommen aus OpenAI, &ldquo;Measuring short-form factuality in large language models&rdquo;, arXiv-Preprint 2411.04368, Tabelle 3. Die Bluffquote ist unsere Berechnung: falsch \/ (falsch + nicht versucht), also der Anteil der nicht korrekten Antworten, bei denen das Modell eine falsche Antwort behauptete statt abzuwinken. Jede Zeile der Quelltabelle summiert sich auf 100,0, was wir gepr\u00fcft haben. Modelle und Daten entsprechen dem Stand Ende 2024, heutige Systeme weichen ab; die Spalte zeigt die Spannweite im Abwinkverhalten, nicht ein aktuelles Anbieterranking.<\/em><\/p>\n<p>Zwei Lesarten, und die zweite ist die wichtigere.<\/p>\n<p>Die naheliegende Lesart ist die Spannweite. GPT-4o-mini sagt Ihnen, wenn es etwas nicht wei\u00df, in 99 von 100 F\u00e4llen trotzdem etwas. Claude-3-sonnet lehnt in derselben Lage in vier von f\u00fcnf F\u00e4llen ab. Das ist ein Unterschied von 4,8 darin, wie sich Scheitern zeigt.<\/p>\n<p>Die wichtigere Lesart: Die Bluffquote ist von der Genauigkeit weitgehend entkoppelt. GPT-4o-mini beantwortete 8,6% der Fragen richtig, Claude-3-haiku 5,1%. Ein Unterschied von 3,5 Prozentpunkten in der Kompetenz und 78 Punkte Unterschied im Verhalten, wenn sie \u00fcberfordert sind. Diese beiden Modelle wissen fast gleich wenig. Eines sagt es, das andere nicht.<\/p>\n<p>Genau das sagt das Halluzinationspapier voraus. Abwinkverhalten ist kein Nebenprodukt von Leistungsf\u00e4higkeit, sondern eine eigene, antrainierte Haltung, geformt davon, was Training und Evaluation belohnt haben. Und weil neun von zehn f\u00fchrenden Benchmarks f\u00fcr Abwinken nichts zahlen, zeigt das Anreizgef\u00e4lle in eine Richtung.<\/p>\n<p>Die praktische Folge: Vertrauensw\u00fcrdigkeit l\u00e4sst sich nicht aus Benchmark-Werten ableiten. Das Modell an der Spitze einer Bestenliste kann dasjenige sein, das Ihnen am ehesten eine erfundene Quelle liefert, denn Listenplatz und Bluffbereitschaft entstehen aus demselben Druck.<\/p>\n<h2 id=\"das-zweite-regime-was-passiert-wenn-sie-die-fakten-liefern\"><span class=\"ez-toc-section\" id=\"Das-zweite-Regime-was-passiert-wenn-Sie-die-Fakten-liefern\"><\/span>Das zweite Regime: was passiert, wenn Sie die Fakten liefern<span class=\"ez-toc-section-end\"><\/span><\/h2>\n<p>Alles bisher Gesagte betrifft Abruf aus dem Ged\u00e4chtnis, bei dem das Modell allein aus Parametern antwortet. Die meiste berufliche Arbeit ist nicht so. Sie f\u00fcgen ein Dokument ein, h\u00e4ngen einen Bericht an, zeigen auf eine Codebasis. Behebt das den Fehler?<\/p>\n<p>Vectara pflegt eine \u00f6ffentliche Halluzinations-Bestenliste auf Basis seines Hallucination Evaluation Model. Die Aufgabe ist bewusst eng: Jedes Modell erh\u00e4lt ein Dokument und soll es ausschlie\u00dflich mit darin enthaltenen Fakten zusammenfassen, danach wird die Zusammenfassung auf Aussagen gepr\u00fcft, die die Quelle nicht st\u00fctzt. Der Datensatz umfasst mehr als 7.700 Artikel aus Nachrichten, Technik, Wissenschaft, Medizin, Recht, Sport, Wirtschaft und Bildung, zwischen 50 und 24.000 W\u00f6rtern, wird zur Vermeidung von \u00dcberanpassung nicht ver\u00f6ffentlicht, und die Modelle werden bei Temperatur 0 aufgerufen. Die nachfolgende Fassung wurde zuletzt am 11. Mai 2026 aktualisiert und umfasst 106 Modelle.<\/p>\n<p>\u00dcber die gesamte Liste reichen die Halluzinationsraten bei vorgelegter Quelle von 1,8% im besten bis 24,2% im schlechtesten Fall.<\/p>\n<p>Vergleichen Sie das mit den Werten ohne Quelle weiter oben, wo GPT-4o 60,8% der SimpleQA-Fragen falsch beantwortete. Das sind andere Aufgaben, andere Modelle und andere Zeitpunkte, es ist also kein direkter Modellvergleich und sollte auch nicht so gelesen werden. Es ist ein Vergleich zweier Regime, und der Abstand dazwischen betr\u00e4gt rund eine Gr\u00f6\u00dfenordnung. Die Tatsache ins Kontextfenster zu legen, ist der gr\u00f6\u00dfte verf\u00fcgbare Einzeleingriff, und er steht bei jeder Aufgabe kostenlos und sofort zur Verf\u00fcgung.<\/p>\n<p>Auf null bringt es die Rate aber nicht, und die Form des verbleibenden Fehlers ist der interessante Teil.<\/p>\n<h2 id=\"der-unerwartete-befund-mehr-denkaufwand-verschlechtert-die-halluzination-bei-vorgelegten-quellen\"><span class=\"ez-toc-section\" id=\"Der-unerwartete-Befund-mehr-Denkaufwand-verschlechtert-die-Halluzination-bei-vorgelegten-Quellen\"><\/span>Der unerwartete Befund: mehr Denkaufwand verschlechtert die Halluzination bei vorgelegten Quellen<span class=\"ez-toc-section-end\"><\/span><\/h2>\n<p>Beim Lesen der Bestenliste fiel uns auf, dass mehrere Modellfamilien mehrfach mit unterschiedlichen Denkeinstellungen erscheinen. Das ergibt nat\u00fcrliche kontrollierte Vergleiche: dieselbe Familie, derselbe Benchmark-Durchlauf, dasselbe Datum, eine ver\u00e4nderte Variable.<\/p>\n<p>Es gibt f\u00fcnf solcher Paare. Sie zeigen Folgendes.<\/p>\n<table>\n<thead>\n<tr>\n<th>Familie<\/th>\n<th>Einstellung geringer Aufwand<\/th>\n<th>Rate<\/th>\n<th>W\u00f6rter<\/th>\n<th>Einstellung hoher Aufwand<\/th>\n<th>Rate<\/th>\n<th>W\u00f6rter<\/th>\n<th>Raten\u00e4nderung<\/th>\n<th>L\u00e4ngen\u00e4nderung<\/th>\n<\/tr>\n<\/thead>\n<tbody>\n<tr>\n<td>GPT-5.2<\/td>\n<td>niedrig<\/td>\n<td>8,4%<\/td>\n<td>126,5<\/td>\n<td>hoch<\/td>\n<td>10,8%<\/td>\n<td>186,3<\/td>\n<td>+2,4 Punkte<\/td>\n<td>+59,8 W\u00f6rter<\/td>\n<\/tr>\n<tr>\n<td>GPT-5.1<\/td>\n<td>niedrig<\/td>\n<td>10,9%<\/td>\n<td>165,5<\/td>\n<td>hoch<\/td>\n<td>12,1%<\/td>\n<td>254,4<\/td>\n<td>+1,2 Punkte<\/td>\n<td>+88,9 W\u00f6rter<\/td>\n<\/tr>\n<tr>\n<td>Grok-4.1-fast<\/td>\n<td>ohne Reasoning<\/td>\n<td>17,8%<\/td>\n<td>87,5<\/td>\n<td>mit Reasoning<\/td>\n<td>19,2%<\/td>\n<td>99,5<\/td>\n<td>+1,4 Punkte<\/td>\n<td>+12,0 W\u00f6rter<\/td>\n<\/tr>\n<tr>\n<td>Grok-4-fast<\/td>\n<td>ohne Reasoning<\/td>\n<td>19,7%<\/td>\n<td>141,9<\/td>\n<td>mit Reasoning<\/td>\n<td>20,2%<\/td>\n<td>173,9<\/td>\n<td>+0,5 Punkte<\/td>\n<td>+32,0 W\u00f6rter<\/td>\n<\/tr>\n<tr>\n<td>o4-mini<\/td>\n<td>niedrig<\/td>\n<td>18,6%<\/td>\n<td>130,9<\/td>\n<td>hoch<\/td>\n<td>18,6%<\/td>\n<td>127,7<\/td>\n<td>0,0 Punkte<\/td>\n<td>-3,2 W\u00f6rter<\/td>\n<\/tr>\n<\/tbody>\n<\/table>\n<p><em>CEOtudent-Redaktionsrahmen. Alle Raten und durchschnittlichen Zusammenfassungsl\u00e4ngen sind w\u00f6rtlich der Halluzinations-Bestenliste von Vectara im Stand vom 11. Mai 2026 entnommen; die Paarbildung, die \u00c4nderungsspalten und die L\u00e4ngenlesart stammen von uns. In vier von f\u00fcnf Paaren innerhalb einer Familie steigen Halluzinationsrate und Zusammenfassungsl\u00e4nge gemeinsam mit dem Denkaufwand. Das f\u00fcnfte, o4-mini, zeigt in beidem keine nennenswerte Bewegung, was mit demselben Zusammenhang vereinbar ist und keine Ausnahme davon darstellt.<\/em><\/p>\n<p>Vier von vier Paaren, die sich bewegten, bewegten sich gleichgerichtet und in beiden Variablen zugleich. Das f\u00fcnfte Paar bewegte sich in keiner. In diesen Daten gibt es keinen Fall, in dem mehr Denkaufwand eine niedrigere Halluzinationsrate bei vorgelegter Quelle erzeugte.<\/p>\n<p>Die L\u00e4ngenspalte legt das Warum nahe, und der Mechanismus ist unspektakul\u00e4r. H\u00f6herer Denkaufwand erzeugt l\u00e4ngere Ausgaben. GPT-5.1 schreibt bei hohem Aufwand 254 W\u00f6rter statt 166 bei niedriger Einstellung, ein Zuwachs von 54%. Jeder zus\u00e4tzliche Satz in einer Zusammenfassung ist eine weitere Gelegenheit, etwas zu behaupten, was das Quelldokument nicht st\u00fctzt. Das Modell denkt sich nicht in die Unwahrheit hinein, es schreibt mehr, und ungedeckte Aussagen h\u00e4ufen sich mit dem Umfang.<\/p>\n<p>Dasselbe Muster zeigt sich in diesem einen Durchlauf \u00fcber die gesamte OpenAI-Familie: gpt-5.4-nano, das kleinste gelistete Modell, liegt bei 3,1%, w\u00e4hrend o3-pro, ein Reasoning-Flaggschiff, bei 23,3% liegt. Das ist eine Spanne von 7,5 innerhalb einer Anbieterpalette, und sie verl\u00e4uft entgegen der Modellst\u00e4rke.<\/p>\n<p>Zwei Einschr\u00e4nkungen, bevor das \u00fcberinterpretiert wird. Der Benchmark misst eine enge Aufgabe, die getreue Zusammenfassung eines vorgelegten Dokuments, und die Vorteile eines Reasoning-Modells bei Mathematik, Code und mehrstufiger Analyse werden hier schlicht nicht bewertet. Zudem handelt es sich um Einzelmessungen ohne ver\u00f6ffentlichte Konfidenzintervalle, sodass die beiden kleinsten Abst\u00e4nde, 0,5 und 1,2 Punkte, als Richtung und nicht als Beweis zu lesen sind. Das Gewicht tr\u00e4gt die \u00dcbereinstimmung \u00fcber unabh\u00e4ngige Familien hinweg, nicht eine einzelne Zeile.<\/p>\n<p>Die handlungsrelevante Fassung: Bei Extraktion und Zusammenfassung, wo die Aufgabe darin besteht, innerhalb eines Quelldokuments zu bleiben, ist der Griff zum gr\u00f6\u00dften Reasoning-Modell nicht automatisch die sichere Wahl und wom\u00f6glich das Gegenteil. Verlangen Sie k\u00fcrzere Ausgaben. Das ist derselbe Hebel.<\/p>\n<h2 id=\"die-funf-mechanismen-und-wie-sie-aussehen\"><span class=\"ez-toc-section\" id=\"Die-fuenf-Mechanismen-und-wie-sie-aussehen\"><\/span>Die f\u00fcnf Mechanismen und wie sie aussehen<span class=\"ez-toc-section-end\"><\/span><\/h2>\n<p>Das Halluzinationspapier z\u00e4hlt die statistischen Faktoren hinter diesen Fehlern auf. Hier sind sie, verkn\u00fcpft mit dem, was Sie jeweils tun k\u00f6nnen. Die Mechanismen stammen aus dem Papier; die Erkennungstests und die Expositionsspalte stammen von uns.<\/p>\n<table>\n<thead>\n<tr>\n<th>Mechanismus<\/th>\n<th>Ursache<\/th>\n<th>Erscheinungsbild<\/th>\n<th>Erkennungstest<\/th>\n<th>Am st\u00e4rksten betroffene Aufgaben<\/th>\n<\/tr>\n<\/thead>\n<tbody>\n<tr>\n<td>Willk\u00fcrliche Fakten<\/td>\n<td>Die Tatsache hat kein verallgemeinerbares Muster und kam im Training selten oder nie vor. Das Papier formalisiert das \u00fcber eine Singleton-Rate: Kam ein Anteil der Fakten genau einmal vor, sollten Basismodelle mindestens in diesem Anteil halluzinieren<\/td>\n<td>Selbstbewusst, spezifisch, plausibel, falsch. Daten, Namen, Quellenangaben, Zahlen, Seitenzahlen<\/td>\n<td>Stellen Sie dieselbe Frage in drei getrennten Sitzungen. Instabile Antworten bedeuten Raten. Stabile Antworten beweisen keine Richtigkeit, aber Instabilit\u00e4t ist fast ein Beweis f\u00fcr einen Fehler<\/td>\n<td>Quellenangaben, biografische Details, Statistiken, wenig bekannte Entit\u00e4ten<\/td>\n<\/tr>\n<tr>\n<td>Schlechte Modellpassung<\/td>\n<td>Die Architektur bildet die Aufgabe unabh\u00e4ngig vom Wissen schlecht ab. Das Beispiel im Papier ist das Z\u00e4hlen von Buchstaben<\/td>\n<td>Scheitert an etwas trivial Einfachem und meistert etwas Schwieriges. Zeichenzahlen, Zeichenkettenoperationen, exakte Arithmetik<\/td>\n<td>Geben Sie eine Aufgabe, die Sie in zwei Sekunden von Hand pr\u00fcfen k\u00f6nnen. Scheitert es dort, misstrauen Sie der Aufgabenklasse, nicht dem Thema<\/td>\n<td>Z\u00e4hlen, Tokenisieren, exakte Zeichenkettenarbeit, Arithmetik mit langen Zahlen<\/td>\n<\/tr>\n<tr>\n<td>Berechnungsh\u00e4rte<\/td>\n<td>Das Problem ist nicht effizient l\u00f6sbar. Kein System, wie leistungsf\u00e4hig auch immer, entkommt Komplexit\u00e4tsgrenzen<\/td>\n<td>Eine fl\u00fcssige Antwort auf etwas, das keine effiziente L\u00f6sung hat<\/td>\n<td>Fragen Sie, ob eine korrekte Antwort in dieser Gr\u00f6\u00dfenordnung \u00fcberhaupt berechenbar ist. Wenn nicht, ist die fl\u00fcssige Antwort Dekoration<\/td>\n<td>Kryptografische Anfragen, gro\u00dfe kombinatorische Optimierung, ersch\u00f6pfende Suche<\/td>\n<\/tr>\n<tr>\n<td>Verteilungsverschiebung<\/td>\n<td>Der Prompt gleicht nichts aus dem Training. Eingaben au\u00dferhalb der Verteilung brechen Klassifikatoren, Modelle bilden keine Ausnahme<\/td>\n<td>Merkw\u00fcrdige Fehler bei Fangfragen, ungew\u00f6hnlichen Formulierungen oder wirklich neuen Situationen<\/td>\n<td>Formulieren Sie konventionell um und fragen Sie erneut. \u00c4ndert sich die Antwort, lag es an der urspr\u00fcnglichen Formulierung<\/td>\n<td>Neuartige Szenarien, bewusst ungew\u00f6hnliche Rahmung, sehr aktuelle Ereignisse<\/td>\n<\/tr>\n<tr>\n<td>Garbage in, Garbage out<\/td>\n<td>Der Fehler stand im Trainingskorpus. Das Modell gibt ihn getreu wieder<\/td>\n<td>Wiederholt selbstbewusst einen verbreiteten Irrtum, eine veraltete Zahl oder ein weit zirkulierendes Falschzitat<\/td>\n<td>Pr\u00fcfen Sie die Prim\u00e4rquelle, nicht ein Suchergebnis. Vielfach wiederholte Zahlen sind die riskanteste Kategorie, gerade weil die Wiederholung sie ins Training gebracht hat<\/td>\n<td>Popul\u00e4re Statistiken, Alltagswissenschaft, umstrittene Geschichte, \u00fcberholte Standards<\/td>\n<\/tr>\n<\/tbody>\n<\/table>\n<p><em>CEOtudent-Redaktionsrahmen. Die f\u00fcnf Mechanismen und ihre technische Grundlage stammen aus Kalai, Nachum, Vempala und Zhang, arXiv-Preprint 2509.04664v1, Abschnitte 3.3 und 3.4. Die Erkennungstests, Expositionsbewertungen und die Aufgabenzuordnung sind unsere Synthese und keine Befunde jenes Papiers.<\/em><\/p>\n<p>Die f\u00fcnfte Zeile verdient Nachdruck, denn sie erwischt die Sorgf\u00e4ltigen. Eine Statistik, die in hundert Artikeln wiederholt wird, wird eher von einem Modell reproduziert als eine Statistik, die einmal in der Prim\u00e4rquelle steht, und Wiederholung ist kein Beleg. Wir sind unmittelbar darauf gesto\u00dfen: Zahlen, die in der Sekund\u00e4rberichterstattung allgegenw\u00e4rtig und in der zugrunde liegenden Studie schlicht nicht vorhanden sind.<\/p>\n<p>Die daraus folgende Regel ist unbequem und richtig. Wenn eine Zahl z\u00e4hlt, \u00f6ffnen Sie das Prim\u00e4rdokument und finden Sie die Zahl darin. Nicht eine Zusammenfassung des Dokuments. Das Dokument.<\/p>\n<h2 id=\"ein-praktikables-vorgehen\"><span class=\"ez-toc-section\" id=\"Ein-praktikables-Vorgehen\"><\/span>Ein praktikables Vorgehen<span class=\"ez-toc-section-end\"><\/span><\/h2>\n<p>F\u00fcnf Schritte, in der Reihenfolge, die mit dem geringsten Aufwand am meisten f\u00e4ngt.<\/p>\n<p><strong>Kl\u00e4ren Sie, in welchem Regime Sie sind.<\/strong> Steht die Antwort im Kontextfenster oder in den Parametern des Modells? Abruf ohne Quelle ist rund eine Gr\u00f6\u00dfenordnung riskanter. Wenn Sie eine Frage ohne Quelle durch Einf\u00fcgen des Dokuments in eine geerdete verwandeln k\u00f6nnen, tun Sie zuerst das. Es ist der wirkungsvollste verf\u00fcgbare Schritt.<\/p>\n<p><strong>Akzeptieren Sie keine Quellenangabe, die Sie nicht ge\u00f6ffnet haben.<\/strong> Titel, Autoren, Jahre, Zeitschriftennamen und Seitenzahlen sind der klassische Fall willk\u00fcrlicher Fakten: kein verallgemeinerbares Muster, hohe Plausibilit\u00e4t im erfundenen Zustand. Behandeln Sie jede unge\u00f6ffnete Referenz als ungepr\u00fcft.<\/p>\n<p><strong>Fragen Sie in einer frischen Sitzung erneut.<\/strong> Billig, schnell und direkt am Mechanismus ansetzend. Ein Modell, das bei einer einmalig vorkommenden Tatsache r\u00e4t, produziert unterschiedliche Vermutungen. Das Halluzinationspapier beginnt genau damit: nach dem Geburtstag eines Autors gefragt, lieferte ein Spitzenmodell in drei Versuchen drei verschiedene falsche Daten.<\/p>\n<p><strong>Verlangen Sie bei geerdeten Aufgaben k\u00fcrzere Ausgaben.<\/strong> Die Paare aus der Bestenliste zeigen, dass L\u00e4nge und ungedeckte Aussagen gemeinsam steigen. Die L\u00e4nge ist der Hebel, den Sie steuern.<\/p>\n<p><strong>Fragen Sie nach der Konfidenz und erlauben Sie ausdr\u00fccklich das Abwinken.<\/strong> Sagen Sie explizit, dass &ldquo;Ich wei\u00df es nicht&rdquo; eine akzeptable Antwort ist. Das ist die nutzerseitige Fassung des im Papier vorgeschlagenen Auswegs. Sie werden die Bewertung der Benchmarks nicht \u00e4ndern, aber die Bewertungsregel innerhalb Ihres eigenen Prompts k\u00f6nnen Sie \u00e4ndern.<\/p>\n<h2 id=\"was-das-nicht-bedeutet\"><span class=\"ez-toc-section\" id=\"Was-das-nicht-bedeutet\"><\/span>Was das nicht bedeutet<span class=\"ez-toc-section-end\"><\/span><\/h2>\n<p>Es bedeutet nicht, dass die Modelle generell unzuverl\u00e4ssig sind. Geerdete Raten von 2 bis 7% f\u00fcr gute Modelle bei getreuer Zusammenfassung sind eine praktikable Fehlerquote f\u00fcr einen ersten Durchgang, sofern Sie wissen, dass sie nicht null ist, und die entscheidenden Stellen pr\u00fcfen.<\/p>\n<p>Es bedeutet nicht, dass Halluzination im n\u00e4chsten Jahr wegentwickelt wird. Das Argument des Papiers ist strukturell: Solange die dominierenden Evaluationen f\u00fcr kalibrierte Unsicherheit nichts zahlen, werden daf\u00fcr optimierte Modelle weiter raten. Eine Korrektur erfordert eine \u00c4nderung der Anzeigetafel, und das ist ein Koordinationsproblem des gesamten Feldes, kein Modellierungsproblem eines einzelnen Labors.<\/p>\n<p>Und es bedeutet nicht, dass Sie alles pr\u00fcfen sollten, denn das hie\u00dfe, das Werkzeug nicht zu nutzen. Es bedeutet, dass Sie wissen sollten, welchem der f\u00fcnf Mechanismen Ihre konkrete Aufgabe ausgesetzt ist, und dort pr\u00fcfen. Gleichm\u00e4\u00dfig verteilter Pr\u00fcfaufwand ist verschwendeter Pr\u00fcfaufwand.<\/p>\n<p>Die hier beschriebene Kompetenz ist nicht Skepsis, sondern Kalibrierung: zu wissen, wo die Fehler wohnen, damit Sie aufh\u00f6ren k\u00f6nnen, \u00fcberall sonst zu suchen. Es ist dieselbe F\u00e4higkeit wie in <a href=\"https:\/\/ceotudent.com\/en\/ai-literacy-vs-ai-fluency\">KI-Kompetenz gegen\u00fcber KI-Fl\u00fcssigkeit<\/a>, angewandt auf die Fehleroberfl\u00e4che statt auf die F\u00e4higkeitsoberfl\u00e4che.<\/p>\n<h2 id=\"hufig-gestellte-fragen\"><span class=\"ez-toc-section\" id=\"Haeufig-gestellte-Fragen\"><\/span>H\u00e4ufig gestellte Fragen<span class=\"ez-toc-section-end\"><\/span><\/h2>\n<p><strong>Halluzinieren neuere Modelle weniger?<\/strong><br \/>\nNicht verl\u00e4sslich und nicht bei jeder Aufgabe. In der im Mai 2026 aktualisierten Bestenliste zur geerdeten Zusammenfassung erreichte das kleinste gelistete Modell der OpenAI-Familie 3,1%, ein Reasoning-Flaggschiff derselben Familie 23,3%. Leistungsf\u00e4higkeit und Quellentreue sind verschiedene Achsen und k\u00f6nnen bei dieser Aufgabe in entgegengesetzte Richtungen zeigen.<\/p>\n<p><strong>L\u00f6st retrieval-augmentierte Generierung das Problem?<\/strong><br \/>\nSie versetzt Sie in das bessere Regime, was ein gro\u00dfer Gewinn ist, aber die geerdeten Raten in diesem Beitrag wurden bereits mit vorgelegtem Quelldokument gemessen. Jede dieser Zahlen ist ein Restfehler, den die Erdung nicht beseitigt hat. Der Abruf f\u00fcgt zudem einen eigenen Fehlermodus hinzu: Wird das falsche Dokument geholt, entsteht eine selbstbewusste Antwort, die getreu in der falschen Quelle verankert ist.<\/p>\n<p><strong>Warum klingt das Modell so sicher, wenn es falsch liegt?<\/strong><br \/>\nWeil Spezifik belohnt wurde und Zur\u00fcckhaltung nicht. Unter bin\u00e4rer Benotung erhalten eine vage und eine falsche Antwort gleicherma\u00dfen null, w\u00e4hrend eine spezifische Vermutung die Chance auf eins hat. Fl\u00fcssige Selbstsicherheit ist das antrainierte Ergebnis dieses Anreizes, kein Signal \u00fcber die Antwort.<\/p>\n<p><strong>Bringt es etwas, das Modell zu fragen, ob es sicher ist?<\/strong><br \/>\nWenig. Angegebene Konfidenz wird systematisch \u00fcbersch\u00e4tzt. Die SimpleQA-Autoren haben das direkt gemessen, indem sie Modelle nach einem Konfidenzprozentsatz fragten und ihn mit der tats\u00e4chlichen Genauigkeit verglichen, und fanden durchg\u00e4ngige \u00dcbersch\u00e4tzung. Wiederholtes Abfragen \u00fcber frische Sitzungen ist ein besseres Signal als Selbstauskunft, weil es Verhalten misst statt einer Behauptung \u00fcber Verhalten.<\/p>\n<p><strong>Welche einzelne Gewohnheit f\u00e4ngt die meisten Fehler?<\/strong><br \/>\nPrim\u00e4rquellen \u00f6ffnen f\u00fcr jede Zahl und jede Quellenangabe, die eine Entscheidung beeinflusst. Sie adressiert die beiden Mechanismen, die f\u00fcr die meisten folgenreichen beruflichen Fehler verantwortlich sind, willk\u00fcrliche Fakten und Garbage in, Garbage out, und kostet etwa eine Minute pro Position.<\/p>\n<h2 id=\"quellen\"><span class=\"ez-toc-section\" id=\"Quellen\"><\/span>Quellen<span class=\"ez-toc-section-end\"><\/span><\/h2>\n<ul>\n<li>Adam Tauman Kalai, Ofir Nachum, Santosh S. Vempala und Edwin Zhang, &ldquo;Why Language Models Hallucinate&rdquo;, arXiv-Preprint 2509.04664 Version 1, September 2025. Tabelle 2 zur Benchmark-Bewertung; Abschnitte 3.3 und 3.4 zu Fehlermechanismen; Abschnitt 4.2 zu expliziten Konfidenzzielen.<\/li>\n<li>OpenAI, &ldquo;Measuring short-form factuality in large language models&rdquo;, arXiv-Preprint 2411.04368, November 2024, mit der Einf\u00fchrung des SimpleQA-Benchmarks. Tabelle 3 zur Modellleistung; Abschnitt 4 zur Kalibrierung.<\/li>\n<li>Vectara, Hallucination Leaderboard, berechnet mit dem Hallucination Evaluation Model auf einem nicht ver\u00f6ffentlichten Korpus von \u00fcber 7.700 Dokumenten, Fassung vom 11. Mai 2026.<\/li>\n<li>Vapnik und Chervonenkis, grundlegende Arbeit zur Dimension von Funktionenfamilien, von Kalai und Kollegen als Basis der Analyse willk\u00fcrlicher Fakten angef\u00fchrt.<\/li>\n<li>I. J. Good, zur Sch\u00e4tzung der H\u00e4ufigkeiten unbeobachteter Arten, der Missing-Mass-Sch\u00e4tzer hinter dem Singleton-Argument.<\/li>\n<li>Stanford Institute for Human-Centered Artificial Intelligence, Artificial Intelligence Index Report, zur Praxis der Modellevaluation und zur S\u00e4ttigung von Benchmarks.<\/li>\n<\/ul>\n<hr>\n<p><em>Dieser Inhalt wurde nach eingehender Recherche mit Unterst\u00fctzung von KI zusammengestellt und vom CEOtudent-Redaktionsteam geschrieben und f\u00fcr die Ver\u00f6ffentlichung aufbereitet.<\/em><\/p>\n","protected":false},"excerpt":{"rendered":"<p>Halluzination ist kein R\u00e4tsel und kein Fehler, der irgendwann behoben wird. Sie ist das vorhersagbare Ergebnis eines Bewertungssystems, das Modelle f\u00fcrs Raten bezahlt und f\u00fcr ein Eingest\u00e4ndnis von Unwissen nichts. Aus OpenAIs eigenen SimpleQA-Ergebnissen haben wir eine Spalte abgeleitet, die das Papier nicht ver\u00f6ffentlicht: die Bluffquote. Wenn diese Modelle scheitern, antwortet eines in 99% der F\u00e4lle falsch, w\u00e4hrend ein anderes in vier von f\u00fcnf F\u00e4llen abwinkt. Dann pr\u00fcften wir die Halluzinations-Bestenliste von Vectara und fanden etwas Merkw\u00fcrdigeres. In vier unabh\u00e4ngigen Vergleichen innerhalb derselben Modellfamilie verschlechterte mehr Denkaufwand die Halluzination bei vorgelegten Quellen, statt sie zu verbessern, und die Zusammenfassungen wurden jedes Mal l\u00e4nger. Dieser Beitrag erkl\u00e4rt die f\u00fcnf belegten Mechanismen, gibt f\u00fcr jeden einen Erkennungstest und zeigt, welchem Ihre Aufgabe tats\u00e4chlich ausgesetzt ist.<\/p>\n","protected":false},"author":1,"featured_media":325704,"comment_status":"open","ping_status":"","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[],"tags":[],"class_list":["post-325701","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry"],"_links":{"self":[{"href":"https:\/\/ceotudent.com\/de\/wp-json\/wp\/v2\/posts\/325701","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/ceotudent.com\/de\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/ceotudent.com\/de\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/ceotudent.com\/de\/wp-json\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"https:\/\/ceotudent.com\/de\/wp-json\/wp\/v2\/comments?post=325701"}],"version-history":[{"count":0,"href":"https:\/\/ceotudent.com\/de\/wp-json\/wp\/v2\/posts\/325701\/revisions"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/ceotudent.com\/de\/wp-json\/wp\/v2\/media\/325704"}],"wp:attachment":[{"href":"https:\/\/ceotudent.com\/de\/wp-json\/wp\/v2\/media?parent=325701"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/ceotudent.com\/de\/wp-json\/wp\/v2\/categories?post=325701"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/ceotudent.com\/de\/wp-json\/wp\/v2\/tags?post=325701"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}