81 Studierende haben sich die Mühe gemacht, an unserer Evaluation zur KI-Korrektur im Klausurenkurs teilzunehmen - davon 50 Personen, die ihre eigenen Arbeiten von einer KI haben bewerten lassen.
Die Ergebnisse der Evaluation machen wir hier ohne jede Kürzung oder Veränderung vollständig zugänglich, damit sich alle interessierten Personen ihr eigenes Bild von Erfahrungen, Verbesserungsvorschlägen, Kritik und positiven Äußerungen machen können.
Die Ergebnisse der Evaluation geben Anlass zu erheblichen Anpassungen. Bemerkenswert sind dabei die Unterschiede zwischen denjenigen, die teilgenommen (also ihre Klausuren durch die KI bewerten ließen), und denjenigen, die nicht teilgenommen haben: In der ersten Gruppe würden 68 % eine reine KI-Korrektur bevorzugen und 16 % eine rein menschliche Korrektur; in der zweiten Gruppe hielten sich beide Präferenzen mit jeweils 41 % die Waage. In beiden Gruppen schnitten die KI-Korrekturen nach den vorgegebenen Kriterien deutlich besser ab als die menschlichen Korrekturen. Als größte Schwächen der KI wurden zu lange, repetitive und unübersichtliche Ausgaben genannt; zudem wurde bemängelt, dass die KI zu starr an den vorgegebenen Lösungswegen festhält und vertretbare alternative Lösungswege mitunter als „falsch" bewertet. Die meisten wünschen sich – soweit möglich – ein hybrides Modell. Vereinzelt kam generelle Systemkritik hinzu.
Die Ergebnisse sehen wir nicht als Anlass, den Stecker zu ziehen und auf die weitere Entwicklung der Technik zu warten. Viele berechtigte konkrete Kritikpunkte können wir bereits jetzt ausräumen und sehen dies als Motivation für Anpassungen und weitere Tests. Wir sind optimistisch, dass wir eine KI-Korrektur bieten können, die allen Studierenden einen echten Mehrwert bietet. Dazu haben wir konkrete weitere Pläne.
Die wichtigsten Fragen beantworten wir in einer FAQ (Frequently Asked Questions). Gerne stehen wir aber auch für Fragen und Anregungen unter studiendekan.jura@uni-passau.de zur Verfügung.
