Änderungen von Dokument 03 Peer Review

Zuletzt geändert von Carina Enke am 13.06.2025

Von Version 413.3
bearbeitet von Carina Enke
am 13.06.2025
Änderungskommentar: Es gibt keinen Kommentar für diese Version
Auf Version 411.1
bearbeitet von Carina Enke
am 12.02.2024
Änderungskommentar: Es gibt keinen Kommentar für diese Version

Zusammenfassung

Details

Seiteneigenschaften
Inhalt
... ... @@ -1,5 +1,4 @@
1 -{{section}}
2 -{{column width="60%"}}
1 +
3 3  Ein **Peer Review** ermöglicht das anonyme Begutachten von eingereichten Aufgaben durch andere Teilnehmer. Aus diesen Gutachten der Teilnehmer kann eine Gesamtbewertung für die jeweils eingereichte Aufgabe entstehen.
4 4  
5 5  Je nach Konfiguration kann das Peer Review folgende Abschnitte umfassen:
... ... @@ -12,14 +12,7 @@
12 12  
13 13  * **[[Nutzung aus Autoren-Sicht>>doc:||anchor="Autoren"]] **, um mit der Konfiguration dieser Abschnitte zu beginnen.
14 14  * **[[Nutzung aus Lerner-Sicht>>doc:||anchor="Informationen"]] **, um zu erfahren, wie der Reviewprozess aus Nutzer-Sicht verläuft und welche Aktionen von Teilnehmern am Reviewprozess erwartet werden.
15 -{{/column}}
16 16  
17 -{{column width="30%"}}
18 -{{panel title="Inhalt"}}
19 -{{toc start="2"/}}
20 -{{/panel}}
21 -{{/column}}
22 -{{/section}}
23 23  
24 24  
25 25  {{id name="Informationen"/}}
... ... @@ -26,6 +26,7 @@
26 26  
27 27  == Nutzung aus Lerner-Sicht ==
28 28  
21 +
29 29  |(((
30 30  Hat der Kursautor für einen Kursbaustein Aufgabe die Bewertung im Peer Review-Verfahren vorgesehen, erscheint beim Aufgabenbaustein der Abschnitt **Informationen zum Ablauf des Peer Review**.
31 31  )))|(((
... ... @@ -59,9 +59,9 @@
59 59  )))
60 60  
61 61  
62 -
63 63  === 1. Review anderer Aufgabenlösungen durchführen ===
64 64  
57 +
65 65  Ist der Reviewbereich freigegeben, erscheint eine entsprechende Aufforderung. Sie sehen den Bereich **Reviews für andere Teilnehmer abgeben**. Mit Klick auf den Button** Review starten** beginnt die Reviewvergabe.
66 66  
67 67  [[image:attach:Kursrun - Review vergeben_de.png||data-xwiki-image-style="img-screen" data-xwiki-image-style-border="true" width="500"]]
... ... @@ -151,6 +151,7 @@
151 151  
152 152  )))|(% colspan="1" %)(% colspan="1" %)
153 153  (((
147 +
154 154  (((
155 155  [[image:attach:Kursrun - Ablauf PeerReview2_de.png||data-xwiki-image-style="img-screen" data-xwiki-image-style-border="true" width="500"]]
156 156  )))
... ... @@ -162,6 +162,7 @@
162 162  
163 163  === 2. Feedback zu vorliegenden Reviews eigener Aufgabenlösungen abgeben ===
164 164  
159 +
165 165  Der Kursersteller kann Ihnen die Möglichkeit einräumen, dass Sie sich zu Reviews, welche Sie zur eigenen Aufgabenlösung erhalten haben, äußern. In diesem Fall sehen Sie den Bereich **Feedback für erhaltene Reviews abgegeben**. Starten Sie Funktion mit Klick auf den Button **Feedback vergeben**.
166 166  
167 167  [[image:attach:Kursrun - Feedback vergeben_de.png||data-xwiki-image-style="img-screen" data-xwiki-image-style-border="true" width="500"]]
... ... @@ -230,8 +230,6 @@
230 230  {{/tip}}
231 231  {{/expand}}
232 232  
233 -
234 -
235 235  === 3. Anzeige der erhaltenen Gesamtbewertung ===
236 236  
237 237  Für die Berechnung und Anzeige der Gesamtbewertung hat der Kursersteller sehr viele Freiheiten. Den Zeitraum und die gewählte Konfiguration können Sie jederzeit im Abschnitt [[Informationen zum Ablauf des Peer Review>>doc:||anchor="Informationen"]] überprüfen.
... ... @@ -350,9 +350,11 @@
350 350  
351 351  === Konfiguration zum 1. Schritt: Review ===
352 352  
346 +
353 353  Legen Sie im ersten Abschnitt Rahmenbedingungen für die Reviewvergabe fest.
354 354  
355 355  {{expand title="Konfiguration im Abschnitt Review ..."}}
350 +
356 356  |(% class="numberingColumn" %)(% class="numberingColumn" %)
357 357  (((
358 358  1
... ... @@ -405,8 +405,6 @@
405 405  {{/info}}
406 406  {{/expand}}
407 407  
408 -
409 -
410 410  === Konfiguration zum 2. Schritt: Feedback (optional) ===
411 411  
412 412  Optional können Sie Ihren Nutzern die Möglichkeit einrichten, Feedback auf erhaltene Reviews zu geben. Klicken Sie auf die Checkbox **Der Teilnehmer kann Feedback zu den erhaltenen Reviews geben**, um den Feedbackprozess zu konfigurieren.
... ... @@ -450,13 +450,12 @@
450 450  )))
451 451  {{/expand}}
452 452  
453 -
454 -
455 455  === Konfiguration zum 3. Schritt: Anzeige der Bewertungsergebnisse ===
456 456  
457 457  Legen Sie hier die Einstellungen zur Anzeige der Gesamtergebnisse für die Teilnehmer fest.
458 458  
459 459  {{expand title="Konfiguration im Abschnitt Ergebnisanzeige ..."}}
451 +
460 460  |(% class="numberingColumn" %)(% class="numberingColumn" %)
461 461  (((
462 462  1
... ... @@ -500,7 +500,6 @@
500 500  {{/expand}}
501 501  
502 502  
503 -
504 504  )))
505 505  )))
506 506  
... ... @@ -511,8 +511,6 @@
511 511  {{/note}}
512 512  {{/expand}}
513 513  
514 -
515 -
516 516  == Gesamtergebnisse zum Reviewprozess ==
517 517  
518 518  Als Autor haben Sie zu jeder Zeit im **Bewertungswerkzeug** einen Überblick darüber, welcher Nutzer (eine Aufgabe gezogen), eine Lösung abgegeben, ein Review eingereicht oder ein Feedback verfasst hat.
... ... @@ -531,6 +531,8 @@
531 531  Um den Stand zum Reviewprozess im Bewertungswerkzeug aufzurufen, gehen Sie wie folgt vor:
532 532  
533 533  {{expand title="Übersicht im Bewertungswerkzeug aufrufen ..."}}
523 +
524 +
534 534  |(((
535 535  (% class="content-wrapper" %)
536 536  (((
... ... @@ -696,6 +696,10 @@
696 696  {{/expand}}
697 697  
698 698  
690 +
691 +{{id name="unangemessen"/}}
692 +
693 +(% id="HUnangemessenesReviewbearbeiten" class="Textbody" %)
699 699  === Unangemessenes Review bearbeiten ===
700 700  
701 701  (% class="Textbody" %)
... ... @@ -745,6 +745,9 @@
745 745  {{/expand}}
746 746  
747 747  
743 +
744 +{{id name="Moderation"/}}
745 +
748 748  (% id="HPeerReviewmitModeration" class="Textbody" %)
749 749  === Peer Review mit Moderation ===
750 750  
... ... @@ -815,14 +815,20 @@
815 815  )))
816 816  {{/expand}}
817 817  
816 +
818 818  [[image:attach:Bewertungswerkzeug - Moderation_de.png||data-xwiki-image-style="img-screen" data-xwiki-image-style-border="true" width="500"]]
819 819  
820 820  
820 +
821 +{{id name="Expertenreview"/}}
822 +
823 +(% id="HExpertenreviewerstellen" class="Textbody" %)
821 821  === Expertenreview erstellen ===
822 822  
823 823  Als Kursverantwortlicher haben Sie jederzeit die Möglichkeit, im Bewertungswerkzeug ebenfalls ein Review für eine Teilnehmerlösung zu erstellen. Das kann je nach Konfiguration notwendig werden, wenn ein Teilnehmer zu wenige Reviews für eine Bewertung erhalten hat, andere Teilnehmer nicht genügend Reviews vergeben haben oder wenn es unangemessene Reviews gab.
824 824  
825 825  {{expand title="Expertenreview durchführen ..."}}
829 +
826 826  |(((
827 827  Wechseln Sie im Bewertungswerkzeug in die Detailansicht der Bewertung eines Nutzers.
828 828  )))|(% rowspan="3" %)(% rowspan="3" %)
... ... @@ -842,14 +842,15 @@
842 842  )))
843 843  {{/expand}}
844 844  
849 +{{id name="Mindestanzahl"/}}
845 845  
846 846  === Auswirkung der Unterschreitung der Mindestanzahl ===
847 847  
848 848  Pädagogisches Ziel der Bewertungsform Peer Review ist es, ein [[Peer Assessment>>url:https://de.wikipedia.org/wiki/Peer_Assessment||shape="rect"]] zu ermöglichen. Somit wurde bei der Konzeption dieser Bewertungsform darauf geachtet, sehr viele Grundszenarien zu ermöglichen, und es wurden vor allem die Anonymität und Zufälligkeit der Vergabe von Teilnehmerlösungen zur Begutachtung als Zielkriterium festgelegt.
849 849  
850 -
851 851  Wenn Sie die Grundeinstellung** Mindestzahl an Reviews verringern und gleichzeitig keine zusätzlichen Reviews erlauben** aktiviert haben, sollten Sie deshalb folgendes beachten, um den Verlauf der Bewertung zu optimieren:
852 852  
857 +{{expand title="Beachten Sie für einen optimalen Verlauf ..."}}
853 853  * **Vergeben Sie feste, sich nicht überschneidende Datumsbeschränkungen:** Die Lösungsabgabe sollte immer zeitlich eingeschränkt vor der Reviewphase liegen (Zugang>Abgabeordner>Datumsbeschränkt bis). Damit ist die zum Start der Reviewphase zur Verfügung stehende Anzahl an Lösungsdateien fix und ändert sich nicht nachträglich während der Reviewphase.
854 854  
855 855  * Mit Start der Reviewphase werden die zur Verfügung stehenden Reviews an die Aufrufenden bei Aufruf des Reviews (= Klick auf "Review starten") jeweils zufällig verteilt. D. h. die Zuordnung eines Reviews erfolgt immer erst dann, wenn der Nutzer auf den Button klickt und wird nicht vorher festgelegt. Dies garantiert in anderen Szenarien einen sehr offenen Peer Review-Prozess der auch später abgegebene Lösungen optimal in den Prozess einbindet.
... ... @@ -856,7 +856,11 @@
856 856  
857 857  * Bei Reduktion der Mindestanzahl auf 1 bekommt jeder Nutzer ein Review zu seiner Lösung, wenn alle Reviews erfolgt sind.
858 858  
859 -* Einzig **der letzte Reviewende kann unter Umständen selbst kein Review von einem Peer für seine Lösung erhalten** und im Gegenzug kann höchstens ein anderer Nutzer zwei Reviews bekommen. Es ist jedoch auch mit dieser Konfiguration ausgeschlossen, dass mehr als ein Nutzer mehr als zwei Reviews erhält. Zusätzlich sinkt die Wahrscheinlichkeit des Auftretens dieses Falles mit steigender Nutzeranzahl.
864 +* (((
865 +(% class="auto-cursor-target" %)
866 + Einzig **der letzte Reviewende kann unter Umständen selbst kein Review von einem Peer für seine Lösung erhalten** und im Gegenzug kann höchstens ein anderer Nutzer zwei Reviews bekommen. Es ist jedoch auch mit dieser Konfiguration ausgeschlossen, dass mehr als ein Nutzer mehr als zwei Reviews erhält. Zusätzlich sinkt die Wahrscheinlichkeit des Auftretens dieses Falles mit steigender Nutzeranzahl.
867 +)))
868 +*
860 860  
861 861  {{expand title="Exkurs zur ungeraden Reviewanzahl ..."}}
862 862  Das Problem entsteht durch das "nacheinander Ziehen" der Reviews. Dies wurde gewählt, um in allen anderen Szenarien vor allem die Gleichverteilung bei mehreren Reviews zu ermöglichen und dabei bestmögliche Anonymität und Zufallsverteilung (auch bei später eingereichten Lösungen ) herzustellen.
... ... @@ -868,3 +868,5 @@
868 868  {{/expand}}
869 869  
870 870  * Wenn der beschriebene Ausnahmefall eintritt, müssen Sie für diesen Nutzer ein [[Expertenreview >>url:http://www.bps-system.de#Expertenreview||shape="rect"]]erstellen. Sie können das Auftreten dieses Falles weiter minimieren, indem Sie die zusätzliche Reviewvergabe erlauben.
880 +{{/expand}}
881 +