10.02.2025
Der Maultaschentest als neue KI-Benchmark
Als ich Chrome öffne, schlägt mir der Browser vor, dass ich doch mal Gemini, die neue tolle KI von Google ausprobieren soll, die könne auch tolle Bilder generieren.
"Challenge accepted", sage ich und da ich am Wochenende in Schwaben war und mir nichts besseres einfällt, sage ich der KI, sie solle mir doch bitte ein Bild von einer Maultasche vor einer typisch schwäbischen Stadt generieren.
Die KI denkt kurz nach und präsentiert mir dann dies:
Ich frage die KI wortwörtlich, ob sie mich verarschen will, das wäre doch keine Maultasche. Die KI entschuldigt sich und zeigt mir ein Bild, auf dem Kinder zu sehen sind, das zu einem YouTube-Video führt. Diese Einlassung verstehe ich noch weniger und bitte noch mal um ein Bild einer Maultasche, vielleicht in Brühe, um der KI etwas auf die Sprünge zu helfen.
Die KI liefert dies:
Das wären keine Maultaschen, sondern Klöße, moniere ich und lasse die KI als einfache Übung ein Bild mit einer Portion Spätzle generieren. Das bekommt sie immerhin hin. Dann frage ich nach, ob sie mir wenigstens erklären kann, was Maultaschen sind, vielleicht kann ich ihr ja damit etwas Hilfe zur Selbsthilfe geben.
"Kannst du dir Bilder von Maultaschen aus dem Internet angucken und daraus eins generieren?" frage ich zum Abschluss und bekomme das hier:
"Immer noch nicht optimal, aber viel besser. Siehst du, da hast du auch was gelernt." sage ich und lasse es nun dabei.
"Ich freue mich, dass ich Ihnen helfen konnte, ein besseres Verständnis für Maultaschen zu entwickeln. Ich lerne ständig dazu und bin dankbar für Ihr Feedback." sagt die KI und ich muss doch sehr bitten. Wenn hier jemand jemandem helfen konnte, ein besseres Verständnis für Maultaschen zu entwickeln, dann war eindeutig ich das.
Eventuell habe ich heute morgen also den Maultaschen-Test als Benchmark für KI-Bildergenerierung erfunden. Clemens aus der TT-Redaktion lässt als Gegentest das gleiche Experiment mit Dall-E laufen und erhält noch absurdere Gebäckstücke, die allesamt sehr sicher keine Maultaschen sind. Wir haben noch einen langen Weg vor uns.
(Anne Schüßler)














