Wie wirken sich unterschiedliche Prüfungsformate auf die Zufriedenheit und die Leistung von Studierendenden aus?

Zwei Durchführungsarten im Vergleich: Moodle-Prüfung mit Safe Exam Browser (SEB, Gruppe 1) versus Papier-Prüfung (Gruppe 2) unter Aufsicht am Campus. Das Experiment liefert spannende Einblicke, ob eine Durchführungsart besser bewertet wird und/oder Leistungsunterschiede zeigt.

Die Studierenden, die sich zur Teilnahme am ‚Prüfungs‘-Experiment bereit erklärt haben, werden einige Tage vor Prüfungsbeginn per Zufall einer von zwei Prüfungsgruppen zugeteilt. Gruppe 1 bearbeitet die Prüfung als Moodle-Test mit SEB auf hochschuleigenen Rechnern, während Gruppe 2 die Prüfung in Papierform absolviert. Rahmenbedingungen wie Räumlichkeit, Beginn der Prüfung, Prüfungsdauer sowie das Auswertungsschema sind in beiden Gruppen identisch bzw. vergleichbar. Die Prüfungsaufgaben bestehen aus Single-Choice-Aufgaben sowie offenen Aufgaben zu Methoden und Inhalten der Ingenieurpsychologie.

Die abschließende Prüfung wird in Form eines Experiments durchgeführt, um zu untersuchen, ob die Durchführungsart (digital vs. Papier) einen signifikanten Einfluss auf die erzielten Leistungen (gemessen in Punkten) sowie auf die Bewertungen der Studierenden hat. Darüber hinaus trägt das experimentelle Setting zur Steigerung der Motivation bei, was sich in einer höheren Teilnahmequote und einer aktiveren Mitwirkung an der anschließenden Prüfungsevaluation widerspiegelt.

Bitte beachten: Falls Sie selbst ein derartiges Experiment durchführen möchten, sollten Sie insbesondere folgende Aspekte berücksichtigen:

• Klärung prüfungsrechtlicher Fragen vor der Durchführung
• Sicherstellung der freiwilligen Teilnahme der Studierenden
• Auswahl von Prüfungsaufgaben, die gleichermaßen in Papier- wie in digitaler Form bearbeitet werden können

Mit Moodle, Safe Exam Browser und CodeRunner müssen Informatikstudierende Code nicht länger auf Papier schreiben. Die Prüfungsfragen beinhalten verschiedene Fragetypen, die sowohl ihr Verständnis der Programmierkonzepte als auch ihre praktische Anwendungskompetenz testen. Diese innovative Prüfungsform bringt die Prüfung näher an die realen Anforderungen der Softwareentwicklung heran und fördert ein praxisorientiertes Lernen. Die Prüfung wird fast automatisiert bewertet.

Die Studierenden werden in den Räumlichkeiten der Hochschule geprüft an einem Termin und Prüfungsdauer (90 Minuten) – wie bei einer klassischen Papier-Prüfung.

• Der gemeinsame Start der Prüfung ist durch ein Start Passwort gewährleistet.
• Individuelle Prüfungszeitverlängerungen können für jeden einzelnen Studierenden konfiguriert werden.
• Die Prüfung wird auf einem separatem Moodle Prüfungsserver (also nicht Moodle Lernserver) und Moodle Kurs durchgeführt.

Zwei Varianten der Durchführung:

• Variante 1: Die Prüfung findet auf Studierenden Laptops statt als Bring Your Own Device-Prüfung (BYOD)
• Variante 2: Die Kohorte wird in zwei Gruppen aufgeteilt und schreibt die Prüfung an Hochschul-PC’s. Die Gruppen schreiben die Prüfung unmittelbar hintereinander und die PC-Plätze sind durch Sichtschutzwände geschützt

Obwohl beide Varianten sich in der Praxis bewährt haben, wird zukünftig ausschließlich die Variante 2 bevorzugt. (Die Variantenauswahl hängt u.a. von der Anzahl der Prüfungsteilnehmer sowie der verfügbaren PC-Räume ab.)

• Prüfung als Moodle Test mit ausgewählten Fragetypen, insbesondere mit Coderunner Plugin sowie Safe Exam Browser, der nur für vorkonfigurierte Links (oder Anwendungen) Internetzugriff erlaubt (z.B. Java API online Dokumentation). Ansonsten verhindert der Safe Exam Browser den weiteren Internetzugriff.
• Es werden nur Fragetypen verwendet, die grundsätzlich eine automatisierte Bewertung der Antwort ermöglichen (das bedeutet auch, dass z.B. eine reine Freitext-Frage für die Prüfung nicht verwendet wird)
• Die Prüfung wird (fast) automatisiert korrigiert. Entsprechende Bewertungen und Notentabelle sind direkt im Moodle Test hinterlegt.