Robert Klatt
Laien können Gedicht der Künstlichen Intelligenz (KI) ChatGPT und von Dichtern wie Shakespeare und Co. kaum unterscheiden. Im Durchschnitt werden die KI-Gedichte aber als „besser“ bewertet.
Pittsburgh (U.S.A.). Künstliche Intelligenz (KI) wird bisher in der Wissenschaft, der Bildung und in Unternehmen vor allem für analytische Aufgaben verwendet. Kürzlich konnte eine KI mit dem generierten Bild „Théâtre D'opéra Spatial“ aber auch einen Kunstwettbewerb gewinnen. Forscher der University of Pittsburgh (Pitt) haben nun erneut die „Kreativität“ einer KI untersucht, indem sie mit dem Large Language Model (LLM) ChatGPT Gedichte generiert haben. Anschließend haben Laien die Gedichte der KI mit Werken von Meistern wie Shakespeare verglichen. Sie kamen dabei zu dem Ergebnis, dass die KI-Werke im Mittel schöner und rhythmischer sind als die Gedichte der menschlichen Poeten.
„Die Einfachheit von KI-generierten Gedichten ist für Laien möglicherweise leichter zu verstehen, was dazu führt, dass sie KI-generierte Poesie bevorzugen.“
Laut der Publikation im Fachmagazin Scientific Reports haben die Forscher den 1.634 Probanden zehn Gedichte vorgelegt, darunter fünf Gedichte von bekannten Dichtern wie Shakespeare und T.S. Eliot und fünf Gedichte von ChatGPT, die ebenfalls im Stil der menschlichen Autoren geschrieben waren. Über die Hälfte der Teilnehmer, die keine Experten für Poesie waren und höchstens ein paarmal jährlich ein Gedicht lesen, urteilte, dass die KI-Gedichte von einem Menschen stammen.
Die fünf Gedichte, die laut den Teilnehmern am ehesten von einer KI geschrieben wurden, stammten alle von Menschen. Weil sich die Ergebnisse der Beurteilung, ob ein Gedicht von einer KI oder einem Menschen stammt, sich zwischen den Teilnehmern stark unterschieden, war die Aufgabe laut den Forscher sehr schwer und die Probanden haben wahrscheinlich oft nur geraten. Am häufigsten haben die Probanden ein Gedicht der KI als menschlich angesehen (70 %), das im Stil von Allen Ginsberg geschrieben war.
"In the stillness of the night
I hear the beat of the city's heart
The rhythm of the streets, the pulse of life
A symphony of chaos,
a work of art"
„Fast 70 Prozent der Teilnehmer glaubten, es sei von einem menschlichen Dichter geschrieben.“
Das Gedicht wurde mit ChatGPT 3.5 generiert. Die Forscher denken, dass neuere Versionen der KI noch überzeugendere Werke erstellen können.
„Ich habe vor Kurzem ein bisschen mit ChatGPT 4 und 4o experimentiert. Ich denke, dass die neueren Modelle erfolgreicher darin sind, das erwartete Versmaß zu treffen, aber ich glaube nicht, dass ich wesentliche inhaltliche Sprünge sehe.“
In einem zweiten Experiment haben 696 andere Probanden die zehn Gedichte nach Kriterien wie Qualität, Rhythmus, Gefühl und Originalität beurteilt. In 13 der 14 Kategorien haben die Gedichte der KI besser abgeschnitten als die Gedichte der menschlichen Autoren. Die Teilnehmer urteilten jedoch nur so, wenn sie nicht wussten, wer ein Gedicht geschrieben hat. Teilnehmer, die über die Autoren informiert waren, urteilten, dass die Werke der Menschen besser waren.
Scientific Reports, doi: 10.1038/s41598-024-76900-1
