[{"data":1,"prerenderedAt":30},["ShallowReactive",2],{"nr-de-perception-bench-multimodal-ai-vision-limits":3},{"slug":4,"title":5,"dek":6,"date":7,"time":8,"publishedAt":9,"updated":10,"updatedAt":10,"dateFmt":11,"updatedFmt":10,"kind":12,"tier":13,"author":14,"authorName":15,"topics":16,"tracker":22,"trackerLabel":23,"headlineStat":24,"image":25,"ogImage":26,"imageAlt":5,"csv":10,"minutes":27,"words":28,"html":29},"perception-bench-multimodal-ai-vision-limits","PerceptionBench: Multimodale KI-Modelle sehen deutlich schlechter als gedacht","Ein neuer Benchmark von Moonshot AI zeigt: Kein Frontier-Modell erreicht 60 Prozent Genauigkeit bei reiner visueller Wahrnehmung. Viele vermeintliche Reasoning-Fehler entstehen bereits beim Bildlesen.","2026-08-15","09:02","2026-08-15T09:02:00+02:00","","15. August 2026","daten","standard","ideal-syka","Ideal Syka",[17,18,19,20,21],"Multimodale KI","Benchmark","Visuelle Wahrnehmung","LLM-Evaluation","Moonshot AI","\u002Fstand-der-ki","KI-Fortschritt","Kein Frontier-Modell erreicht 60 % Genauigkeit bei visueller Wahrnehmung","\u002Fnewsroom\u002Fimg\u002Fperception-bench-multimodal-ai-vision-limits.webp","\u002Fog-nr\u002Fperception-bench-multimodal-ai-vision-limits.de.png",2,449,"\u003Cp>Moonshot AI hat mit \u003Cstrong>PerceptionBench\u003C\u002Fstrong> einen Benchmark vorgestellt, der die visuelle Wahrnehmung multimodaler Sprachmodelle isoliert von logischem Denken testet – und das Ergebnis ist ernüchternd: Kein führendes KI-Modell knackt die 60-Prozent-Marke bei grundlegenden Sehaufgaben.\u003C\u002Fp>\n\u003Ch2>Kurz & knapp\u003C\u002Fh2>\n\u003Cul>\n\u003Cli>\u003Cstrong>PerceptionBench\u003C\u002Fstrong> zerlegt visuelle Wahrnehmung in zehn atomare Teilkompetenzen statt Wahrnehmung, Wissen und Schlussfolgern zu vermischen\u003C\u002Fli>\n\u003Cli>\u003Cstrong>Beste Modelle erreichen maximal 59,7 Prozent Genauigkeit\u003C\u002Fstrong>: GPT-5.6 Sol führt knapp vor Kimi K3 (58,5 %) und Claude Fable 5 (57,2 %)\u003C\u002Fli>\n\u003Cli>Die Fehleranalyse zeigt: Viele vermeintliche \u003Cstrong>Logikfehler entstehen bereits beim Bildlesen\u003C\u002Fstrong>, nicht beim Reasoning\u003C\u002Fli>\n\u003Cli>Aus über \u003Cstrong>17.000 verifizierten Fragen\u003C\u002Fstrong> wurden 3.000 Aufgaben veröffentlicht, basierend auf realen Modellfehlern\u003C\u002Fli>\n\u003C\u002Ful>\n\u003Ch2>Wie der Benchmark funktioniert\u003C\u002Fh2>\n\u003Cp>Das Team hinter dem chinesischen KI-Assistenten Kimi entwickelte PerceptionBench anders als gängige Tests: Statt Kategorien vorab festzulegen, analysierten die Autoren reale Modellfehlmuster aus 42 bestehenden Open-Source-Benchmarks. Diese überschneiden sich kaum – jeder deckt also nur eine andere Teilmenge visueller Schwächen ab.\u003C\u002Fp>\n\u003Cp>Daraus entstanden zehn \u003Cstrong>Fähigkeitenbereiche\u003C\u002Fstrong>: Visual Relation, Counting, Attribute, Depth & 3D, Localization, Comparison, Fine-grained Recognition, Context Integration, OCR und Hallucination. Jede Frage soll allein durch Hinsehen beantwortbar sein – ohne externes Wissen oder Reasoning.\u003C\u002Fp>\n\u003Cp>Die Aufgaben wirken auf den ersten Blick trivial: die Uhrzeit-Position eines Symbols auf einem Zifferblatt bestimmen, Blumen in einem roten Kasten zählen oder entscheiden, welche von zwei Stiftbechern eine Grau-Rosa-Kombination zeigt. Doch genau hier offenbaren sich die Grenzen.\u003C\u002Fp>\n\u003Ch2>Die Ergebnisse: Frontier-Modelle weit hinter 60 Prozent\u003C\u002Fh2>\n\u003Cdiv class=\"tbl-scroll\">\u003Ctable>\n\u003Cthead>\n\u003Ctr>\n\u003Cth>Modell\u003C\u002Fth>\n\u003Cth>Genauigkeit\u003C\u002Fth>\n\u003C\u002Ftr>\n\u003C\u002Fthead>\n\u003Ctbody>\u003Ctr>\n\u003Ctd>GPT-5.6 Sol\u003C\u002Ftd>\n\u003Ctd>59,7 %\u003C\u002Ftd>\n\u003C\u002Ftr>\n\u003Ctr>\n\u003Ctd>Kimi K3\u003C\u002Ftd>\n\u003Ctd>58,5 %\u003C\u002Ftd>\n\u003C\u002Ftr>\n\u003Ctr>\n\u003Ctd>Claude Fable 5\u003C\u002Ftd>\n\u003Ctd>57,2 %\u003C\u002Ftd>\n\u003C\u002Ftr>\n\u003Ctr>\n\u003Ctd>Gemini 3.1 Pro\u003C\u002Ftd>\n\u003Ctd>56,2 %\u003C\u002Ftd>\n\u003C\u002Ftr>\n\u003Ctr>\n\u003Ctd>GPT-5.5\u003C\u002Ftd>\n\u003Ctd>55,8 %\u003C\u002Ftd>\n\u003C\u002Ftr>\n\u003Ctr>\n\u003Ctd>Qwen3.5-397B-A17B\u003C\u002Ftd>\n\u003Ctd>47,5 %\u003C\u002Ftd>\n\u003C\u002Ftr>\n\u003Ctr>\n\u003Ctd>GLM-4.6V\u003C\u002Ftd>\n\u003Ctd>32,5 %\u003C\u002Ftd>\n\u003C\u002Ftr>\n\u003C\u002Ftbody>\u003C\u002Ftable>\u003C\u002Fdiv>\n\u003Cp>Zwischen den fünf besten Systemen liegen nur knapp vier Prozentpunkte – ein Hinweis darauf, dass das Sehen für alle Frontier-Modelle ein gemeinsames Schwachpunkt ist. Open-Source-Modelle fallen deutlich ab.\u003C\u002Fp>\n\u003Ch2>Was das bedeutet\u003C\u002Fh2>\n\u003Cp>Die Studie bestätigt, was Forschung der letzten Monate bereits andeutete: \u003Cstrong>Selbst beste Modelle scheitern an grundlegenden Sehaufgaben\u003C\u002Fstrong>. Das hat praktische Konsequenzen. Wenn ein Modell eine Tabelle falsch liest oder Objekte verwechselt, führt das nicht zu Reasoning-Fehlern – die Fehler entstehen bereits beim Bildlesen selbst.\u003C\u002Fp>\n\u003Cp>Für deutsche Unternehmen, die multimodale KI in der Praxis einsetzen – etwa in Dokumentenverarbeitung, Qualitätskontrolle oder Medizinbildanalyse – bedeutet das: Verlasst euch nicht darauf, dass die Modelle das sehen, was ihr seht. Validiert visuelle Ergebnisse kritisch, besonders bei sicherheitskritischen Anwendungen. Die Genauigkeit bei "einfachen" visuellen Aufgaben ist deutlich niedriger als bei Sprachaufgaben – ein wichtiger Faktor bei der Auswahl und Kalibrierung von Systemen.\u003C\u002Fp>\n\u003Ch2>Quellen\u003C\u002Fh2>\n\u003Cul>\n\u003Cli>\u003Ca href=\"https:\u002F\u002Fthe-decoder.de\u002Fneuer-benchmark-bestaetigt-ki-modelle-sehen-weiterhin-schlecht\u002F\">The Decoder (DE)\u003C\u002Fa>\u003C\u002Fli>\n\u003Cli>\u003Ca href=\"https:\u002F\u002Fthe-decoder.com\u002Fnew-benchmark-confirms-ai-models-still-perform-poorly-at-visual-perception\u002F\">The Decoder\u003C\u002Fa>\u003C\u002Fli>\n\u003C\u002Ful>\n\u003Cp>\u003Cem>Redaktionell verantwortet von \u003Ca href=\"\u002Fautor\u002Fideal-syka\">Ideal Syka\u003C\u002Fa>. Quellen und Arbeitsweise: \u003Ca href=\"\u002Fredaktion\">Redaktion & Methode\u003C\u002Fa>. Hinweise und Korrekturen: \u003Ca href=\"mailto:ai@i6eal.de\">ai@i6eal.de\u003C\u002Fa>.\u003C\u002Fem>\u003C\u002Fp>\n",1786777672846]