Laut Forschern übertrifft ChatGPT von OpenAI den durchschnittlichen Universitätsstudenten in Informatik, interessanterweise jedoch nicht in Mathematik.
Die Leistung des großen Sprachmodells übertrifft auch den durchschnittlichen Studenten in anderen Fächern, darunter Politikwissenschaft, Ingenieurwesen und Psychologie, heißt es in einem Artikel, der in veröffentlicht wurde Wissenschaftliche Berichte sagte. In Mathematik und Wirtschaftswissenschaften war die Chatbot-Technologie jedoch unterdurchschnittlich. Die Autoren argumentieren, dass die Ergebnisse dazu beitragen können, die Politik bei der Einführung von KI-Tools in der Bildung zu informieren.
Das Team unter der Leitung von Talal Rahwan und Yasir Zaki, beide außerordentliche Professoren für Informatik an der New York University Abu Dhabi (NYUAD), stellte fest, dass ChatGPT die Studenten in einem Kurs mit dem Titel „Einführung in die öffentliche Ordnung“ am deutlichsten übertraf, in dem die Durchschnittsnote bei lag 9.56 im Vergleich zu einem Durchschnitt von 4.39 für Studenten.
Im Rahmen der Studie wurden die Fakultätsmitglieder der NYUAD gebeten, zehn Fragen aus einem Kurs, den sie an der Universität unterrichtet haben, zusammen mit drei zufällig ausgewählten Studentenantworten auf jede Frage bereitzustellen. In der Zwischenzeit wurde ChatGPT verwendet, um drei unterschiedliche Antworten auf jede der zehn Fragen zu generieren, die für jeden Kurs bereitgestellt wurden.
Die Antworten der Studierenden und von ChatGPT wurden dann in zufälliger Reihenfolge in einem einzigen Dokument zusammengefasst und von Prüfern bewertet, die nicht wussten, welche von einer Person und welche vom LLM stammten.
„Wir stellen fest, dass die Leistung von ChatGPT mit der von Studenten in neun der 32 Kurse vergleichbar oder sogar besser ist. Darüber hinaus stellen wir fest, dass aktuelle Erkennungsalgorithmen dazu neigen, menschliche Antworten fälschlicherweise als von KI generiert zu klassifizieren und ChatGPT-Antworten fälschlicherweise als von Menschen generiert zu klassifizieren“, heißt es in der Studie.
Allerdings: „Auch hier stellen wir fest, dass der größte Leistungsunterschied zwischen ChatGPT und Schülern bei mathebezogenen Fragen bestand, gefolgt von Trickfragen. Derzeit scheinen Menschen ChatGPT in diesen Bereichen zu übertreffen.“
Die Untersuchung ergab außerdem, dass die Verwendung eines Verschleierungsangriffs, der darauf abzielt, KI-Filter zu umgehen, dazu führen würde, dass Erkennungsalgorithmen 95 Prozent der ChatGPT-Antworten nicht erkennen könnten.
Um zu verstehen, wie KI in Bildungsumgebungen wahrgenommen werden könnte, befragten die Forscher Studenten und Mitarbeiter in Brasilien, Indien, Japan, Großbritannien und den USA.
Sie fanden heraus, dass 57 Prozent der Studierenden planen, ChatGPT zur Unterstützung bei ihren Aufgaben zu nutzen, und 64 Prozent erwarten, dass ihre Kommilitonen dasselbe tun. Allerdings gaben 69 Prozent der Professoren an, dass sie planen, die Verwendung von ChatGPT als Plagiat zu behandeln.
Während Studenten und ihre Professoren offenbar unterschiedlicher Meinung über den Einsatz von ChatGPT im College sind, wurden dadurch gleiche Wettbewerbsbedingungen für nicht-englische Muttersprachler geschaffen.
„Zwischen Pädagogen und Schülern herrscht allgemeiner Konsens darüber, dass der Einsatz von ChatGPT in der Schularbeit anerkannt werden sollte und dass dies die Wettbewerbsfähigkeit von Schülern steigern wird, deren Muttersprache nicht Englisch ist“, heißt es in dem Papier. ®
- SEO-gestützte Content- und PR-Distribution. Holen Sie sich noch heute Verstärkung.
- PlatoData.Network Vertikale generative KI. Motiviere dich selbst. Hier zugreifen.
- PlatoAiStream. Web3-Intelligenz. Wissen verstärkt. Hier zugreifen.
- PlatoESG. Automobil / Elektrofahrzeuge, Kohlenstoff, CleanTech, Energie, Umwelt, Solar, Abfallwirtschaft. Hier zugreifen.
- PlatoHealth. Informationen zu Biotechnologie und klinischen Studien. Hier zugreifen.
- ChartPrime. Verbessern Sie Ihr Handelsspiel mit ChartPrime. Hier zugreifen.
- BlockOffsets. Modernisierung des Eigentums an Umweltkompensationen. Hier zugreifen.
- Quelle: https://go.theregister.com/feed/www.theregister.com/2023/08/25/chatgpt_outperforms_average_uni_students/
