Robert Klatt
Das Sprachmodell ChatGPT erzielt bei Prüfungen in vielen Fächern bessere Ergebnisse als Studenten.
Abu Dhabi (Vereinigte Arabische Emirate). Eine Studie der University of California, Los Angeles (UCLA) zeigte kürzlich, dass die Künstliche Intelligenz (KI) GPT-3 Studenten beim analogen Denken übertrifft. Nun haben Forscher der New York University Abu Dhabi (NYUAD) untersucht, wie ChatGPT Prüfungsfragen in unterschiedlichen Fachrichtungen wie Informatik, Politik, Ingenieurwissenschaften und Psychologie beantworten kann und ob er durchschnittliche Studenten übertrifft.
Laut der Publikation im Fachmagazin Scientific Reports haben Lehrkräfte der NYUAD für die Studie jeweils zehn Fragen bereitgestellt. Anschließend hat ChatGPT für jede Frage drei Antwortensätze erstellt, die von Prüfern bewertet wurden, die nicht wussten, ob die Antworten von der KI oder von einem Menschen stammten. In neun der 32 erhielten die von ChatGPT erzeugten Antworten eine ähnliche oder höhere Durchschnittsnote als die der Studenten. Die Durchschnittsnote der KI (9,56) ist im Kurs „Einführung in die öffentliche Politik“ am deutlichsten von den Studenten (4,39) abgewichen. In den Kursen für Mathematik und Wirtschaftswissenschaften schnitten die Studenten hingegen konsequent besser ab als ChatGPT.
Zudem haben die Forscher 1.601 Studenten aus Brasilien, Indien, Japan, den U.S.A. und dem Vereinigten Königreich dazu befragt, ob sie ChatGPT als mögliche Hilfe für Universitätsaufgaben nutzen würden. Ein Großteil der Studenten (74 %) gab an, dass sie ChatGPT für ihre Arbeit nutzen würden. Im Gegensatz dazu unterschätzten in allen Ländern die Dozenten den Anteil der Studenten, die planen, ChatGPT zu verwenden, und die meisten Dozenten (70 %) würden dessen Verwendung als Plagiat betrachten.
Scientific Reports, doi: 10.1038/s41598-023-38964-3
