Peer Assessment
Worum geht's?
Studierende bewerten Studierende
Ein effektiver Weg, um Studierende bei der Reflexion ihrer Arbeiten zu unterstützen und ihr Verständnis der Bewertungskriterien zu erhöhen, sind sogenannte Peer Assessments (auch Peer Grading, Peer Feedback oder Peer Evaluation). Bei dieser Methode bewerten die Studierenden die Arbeiten ihrer Kommiliton:innen auf Basis von Bewertungskriterien, die sie von den Lehrenden erhalten. Durch das Befassen mit fremden Arbeiten und den eigenem Feedback haben die Studierenden die Möglichkeit, von ihren Mitstudierenden zu lernen und erhalten während des Bewertungsprozesses ein transparentes Verständnis wie z.B. in einer Prüfung bewertet wird.
Ablauf und Vorgehen
Der Prozess des Peer Assessments ist dabei in mehrere Phasen unterteilt:
1. Vorbereitung
Der Lehrende bereitet eine Aufgabe sowie Bewertungskriterien für die Studierenden vor. Häufig ist es sinnvoll, klare Regeln für die Durchführung des Peer Assessments zu definieren (z.B. wie viele Bewertungen erfolgen pro Person, in welcher Form erfolgt die Bewertung).
2. Einreichungsphase
Die Studierenden bearbeiten einzeln die Aufgaben und reichen diese anschließend ein. Die fertigen Abgaben werden dann anderen Studierenden zur Bewertung zugewiesen.
3. Beurteilungsphase
Nun bewerten die Studierenden die ihnen zugeteilten Einreichungen auf Grundlage der vorgegebenen Bewertungskriterien. Sie formulieren Feedback und/oder vergeben Punkte.
4. Bewertungsphase
Der Lehrende hat nun die Möglichkeit, die Bewertung der Studierenden zu kommentieren und ebenfalls Feedback zu formulieren. Wenn mehrere Studierende eine Abgabe bewertet haben, kann zu diesem Zeitpunkt auch eine Gesamtbewertung der jeweiligen Abgabe bestimmt.
Aktivität in Moodle
Die Durchführung des Peer Assessments kann mit Moodle organisiert werden. Die Aktivität "Gegenseitige Beurteilung" ermöglicht es den Studierenden, ihre Arbeiten hochzuladen und von ihren Mitstudierenden bewerten zu lassen. Die Zuweisung der Arbeiten wird dabei von den Lehrenden koordiniert und kann manuell oder automatisch erfolgen.
Schritt-für-Schritt-Anleitung
Schritt 1: Aktivität anlegen
Fügen Sie „Gegenseitige Beurteilung“ wie gewohnt als Aktivität in Ihren Moodle-Kurs ein.
Schritt 2: Vorbereitungsphase
Allgemein
In der Vorbereitungsphase wird die Aktivität konfiguriert. In der Beschreibung der Aktivität können Sie den allgemeinen Ablauf des Peer Assessments für die Studierenden erklären.
Punkteeinstellungen
Im Bereich „Punkteeinstellungen“ legen Sie fest, welche Beurteilungsform in der Aktivität genutzt werden soll. Bei „Akkumulative Bewertung“ z.B. können die Studierenden Punkte für vordefinierte Kriterien vergeben und zusätzlich Kommentare verfassen.
Anschließend können Sie die maximale Anzahl Punkte für Einreichungen und Beurteilungen definieren. Die Punkte für Einreichungen werden dabei im Peer Assessment von den Studierenden vergeben, die Punkte für die Beurteilung vergeben Sie als Lehrende auf Basis der abgegebenen Beurteilungen.
Einstellungen Einreichungen
Anschließend können Sie Einstellungen zu den Einreichungen vornehmen. Hier empfiehlt es sich, eine kurze Anleitung für die Einreichung zu verfassen. Diese wird den Studierenden in der Einreichungsphase angezeigt. Wichtig sind hier beispielsweise die Aufgabenstellung, Erklärungen zu Art und Umfang der Abgabe sowie Anzahl und Größe der Dateien. Ähnlich wie in anderen Aktivitäten können Sie hier auch die Anzahl der hochladbaren Dateien und die maximale Dateigröße festlegen. Auch eine verspätete Abgabe können Sie erlauben.
Beurteilungseinstellungen
Im Bereich „Beurteilungseinstellungen“ sollten Sie ebenfalls eine kurze Anleitung formulieren, welche die Studierenden durch die Beurteilungsphase leitet. Hier können Sie z.B. erklären, worauf die Studierenden bei der Bewertung achten sollen. Wenn die Studierenden eigene Einreichungen ebenfalls beurteilen sollen, müssen Sie den Haken bei Selbstbeurteilung setzen.
Feedback
Um den Studierenden die Möglichkeit zu geben, ein Gesamtfeedback bei den Beurteilungen zu verfassen, können Sie im Bereich „Feedback“ den Gesamtfeedbackmodus zu aktivieren. Auch im Feedback können Sie wieder einen Dateiupload erlauben. Im Textfeld „Abschluss“ können Sie ein abschließendes Feedback verfassen, in dem Sie die Aktivität zusammenfassen und z.B. einen Ausblick auf die nächste Vorlesung geben.
Weitere Einstellungen & nächste Phase
In den weiteren Einstellungen können Sie z.B. noch Beispieleinreichungen hochladen oder die Verfügbarkeit der Aktivität einstellen. Speichern Sie anschließend die vorgenommenen Einstellungen.
Zum Schluss sollten Sie nun noch den Beurteilungsbogen vorbereiten. In diesem definieren Sie die Kriterien, anhand derer die Studierenden die Abgaben bewerten sollen. Öffnen Sie dazu die Aktivität und klicken Sie im Bereich der Vorbereitungsphase auf „Beurteilungsbogen bearbeiten“.
Bei der akkumulativen Bewertung können Sie nun verschiedene Kriterien definieren und die maximale Punktezahl für diese festlegen. Auch eine Gewichtung kann hier gewählt werden.
Die von Ihnen definierten Kriterien werden den Studierenden später während der Beurteilungsphase angezeigt.
Schritt 3: Einreichungsphase
Allgemein
Während der Einreichungsphase bearbeiten die Studierenden die von Ihnen bereitgestellte Aufgabenstellung und laden anschließend ihre Abgabe in der Moodle-Aktivität hoch.
Starten Sie die Einreichungsphase am besten erst zu Beginn der Vorlesung. Klicken Sie dazu im Bereich „Vorbereitungsphase“ auf „Zur nächsten Phase wechseln“.
Sie befinden sich nun in der Einreichungsphase. Die Studierenden sehen ab sofort Ihre Anleitungen zur Einreichung und bearbeiten die Aufgabe.
Einreichungen zuordnen
Im Bereich „Einreichungsphase“ können Sie zu jedem Zeitpunkt die Anzahl der bereits hochgeladenen Einreichungen sehen und mit der Anzahl der erwarteten Einreichungen abgleichen. Die erwarteten Einreichungen entsprechen der Anzahl der Teilnehmenden im Moodle-Kurs.
Sobald alle Studierenden ihre Abgabe hochgeladen haben, können Sie die Einreichungen zuordnen. Klicken Sie hierzu auf „Einreichungen zuordnen“.
Sie können die Zuordnung entweder manuell vornehmen oder von Moodle automatisch generieren lassen. Zur automatischen Zuordnung wählen Sie den Tab „Zufällige Zuordnung“ aus. Im Beispiel werden zwei Beurteilungsaufträge pro Einreichung definiert, sodass jede Studentin und jeder Student am Schluss zwei Bewertungen von anderen Studierenden erhält. Klicken Sie anschließend auf „Änderung speichern”, um die Einteilung festzulegen.
Nun können Sie in die nächste Phase wechseln. Klicken Sie dazu im Bereich „Einreichungsphase“ auf „Zur nächsten Phase wechseln“.
Schritt 4: Beurteilungsphase
Während der Beurteilungsphase bewerten die Studierenden die ihnen zugeteilten Einreichungen und formulieren Feedback.
Während der Beurteilungsphase können Sie für jeden Studierenden einsehen, welche Beurteilungen noch offen sind und welche bereits vergeben wurden.
Sobald alle Studierenden ihr Feedback hochgeladen haben, können Sie in die nächste Phase wechseln. Klicken Sie dazu wieder auf „Zur nächsten Phase wechseln“.
Schritt 5: Bewertungsphase
In der Bewertungsphase ermitteln Sie die Gesamtbewertung der einzelnen Studierenden. Die Bewertung setzt sich dabei aus der Einreichung und der Beurteilung zusammen. Im Bereich „Einstellungen für rechnerische Bewertungen“ können Sie die Bewertungen neu berechnen lassen. Sofern Sie eine punktebasierte Bewertung (wie z.B. die akkumulative Bewertung) gewählt haben, müssen Sie diese Berechnung ausführen!
Anschließend können Sie selbst noch Feedback geben und bei Bedarf auch einzelne Einreichungen veröffentlichen.
Sobald Sie Ihr Feedback fertig eingetragen haben und die Bewertungen ermittelt sind, können Sie zur nächsten Phase wechseln. Klicken Sie dazu wieder auf „Zur nächsten Phase wechseln“.
Nun werden den Studierenden ihre Bewertungen und das Feedback angezeigt.
Hinweise & Tipps
Vorbereiten der Phasen
Definieren Sie bereits im Vorfeld die Zeitslots für die einzelnen Phasen. Planen Sie die Aufgabenstellung entsprechend, sodass die Studierenden die Aufgaben auch innerhalb der vorgegebenen Zeit bearbeiten und beurteilen können. Nutzen Sie einen Timer, um während der Vorlesung auch die einzelnen Zeitslots einzuhalten.
Anonymität
Die Aktivität ist standardmäßig nicht anonym. Die Studierenden sehen entsprechend die Namen der Einreichungen und der Beurteilenden. Um zu verhindern, dass die Studierenden die Namen der anderen Studierenden sehen können, müssen Sie die Rechte anpassen.
Scrollen Sie auf der nächsten Seite nach unten.
Für ein „single blind“-Verfahren (Gutachtende sind anonym) entfernen Sie bei dem Bereich „Beurteilernamen anzeigen“ die Rolle „Teilnehmer/in“. Klicken Sie dazu auf den Mülleimer neben dem Wort „Teilnehmer/in“.
Für ein „double blind“-Verfahren (Autoren und Gutachtende sind anonym) entfernen Sie bei den beiden Bereichen „Autorennamen anzeigen“ und „Beurteilernamen anzeigen“ die Rolle „Teilnehmer/in“. Klicken Sie dazu auf den Mülleimer neben dem Wort „Teilnehmer/in“.
Gruppenarbeit
Auch eine Gruppenarbeit ist beim Peer Assessment möglich. Hierbei gibt es zwei Varianten:
1. Die gruppenleitende Person lädt die Abgabe hoch, alle in der Gruppe bewerten.
2. Die gruppenleitende Person lädt die Abgabe hoch, die Gruppe bewertet gemeinsam und die gruppenleitende Person lädt die Bewertung hoch.
Teilen Sie hierfür die Studierenden vor der Durchführung des Peer Assessments in Gruppen ein. Dabei können Sie den Studierenden die Wahl der Gruppen frei überlassen oder die Einteilung automatisch generieren lassen. Nutzen Sie hierzu die Moodle-Aktivität "Gruppenwahl".
Nach erfolgreicher Gruppenwahl kann das Peer Assessment durchgeführt werden. Der Ablauf unterscheidet sich grundsätzlich nicht von der Durchführung des individuellen Peer Assessments. Beachten Sie jedoch, dass die Abgabe und (je nach Wahl der Variante) auch die Bewertung lediglich von der gruppenleitenden Person hochgeladen werden. Das sollten Sie den Studierenden entsprechend kommunizieren.
Durchführung mit mehreren Terminen
Auch über mehrere Termine (mit unterschiedlichen Teilnehmer:innen) hinweg können Sie Peer Assessment einsetzen. Ein möglicher Ablauf könnte beispielsweise so aussehen:
In den einzelnen Terminen bearbeiten die Studierenden die Aufgaben und laden anschließend ihre Abgaben hoch.
Nachdem alle Termine beendet sind und entsprechend alle Studierenden ihre Abgaben hochgeladen haben, erfolgt die Zuteilung der Einreichungen zur Bewertung. So ist es beispielsweise auch möglich, dass Studierende aus dem zweiten Termin Abgaben aus dem ersten Termin bewerten können.
Die Beurteilung kann dann beispielsweise außerhalb des Kurses stattfinden.