Änderungen von Dokument 03 Peer Review

Zuletzt geändert von Carina Enke am 13.06.2025

Von Version 411.1
bearbeitet von Carina Enke
am 12.02.2024
Änderungskommentar: Es gibt keinen Kommentar für diese Version
Auf Version 410.3
bearbeitet von Carina Enke
am 20.12.2023
Änderungskommentar: Update document after refactoring.

Zusammenfassung

Details

Seiteneigenschaften
Titel
... ... @@ -1,1 +1,1 @@
1 -03 Peer Review
1 +Peer Review
Inhalt
... ... @@ -1,10 +1,23 @@
1 +{{layout}}
2 +{{layout-section ac:type="single"}}
3 +{{layout-cell}}
4 +\\
1 1  
6 +(% class="auto-cursor-target" %)
7 +
8 +{{/layout-cell}}
9 +{{/layout-section}}
10 +
11 +{{layout-section ac:type="two_right_sidebar"}}
12 +{{layout-cell}}
2 2  Ein **Peer Review** ermöglicht das anonyme Begutachten von eingereichten Aufgaben durch andere Teilnehmer. Aus diesen Gutachten der Teilnehmer kann eine Gesamtbewertung für die jeweils eingereichte Aufgabe entstehen.
3 3  
4 4  Je nach Konfiguration kann das Peer Review folgende Abschnitte umfassen:
5 5  
6 -* **Schritt 1: Review anderer Aufgabenlösungen durchführen**
7 -* **Schritt 2: Feedback zu vorliegenden Reviews eigener Aufgabenlösungen abgeben**
17 +* **Schritt 1: Review anderer Aufgabenlösungen durchführen
18 +**
19 +* **Schritt 2: Feedback zu vorliegenden Reviews eigener Aufgabenlösungen abgeben
20 +**
8 8  * **Schritt 3: Anzeige der erhaltenen Gesamtbewertung**
9 9  
10 10  Lesen Sie weiter unter
... ... @@ -12,19 +12,37 @@
12 12  * **[[Nutzung aus Autoren-Sicht>>doc:||anchor="Autoren"]] **, um mit der Konfiguration dieser Abschnitte zu beginnen.
13 13  * **[[Nutzung aus Lerner-Sicht>>doc:||anchor="Informationen"]] **, um zu erfahren, wie der Reviewprozess aus Nutzer-Sicht verläuft und welche Aktionen von Teilnehmern am Reviewprozess erwartet werden.
14 14  
28 +\\
15 15  
16 16  
31 +
17 17  {{id name="Informationen"/}}
33 +{{/layout-cell}}
18 18  
35 +{{layout-cell}}
36 +{{scroll-ignore}}
37 +{{panel title="Inhalt"}}
38 +
39 +
40 +{{toc/}}
41 +{{/panel}}
42 +{{/scroll-ignore}}
43 +{{/layout-cell}}
44 +{{/layout-section}}
45 +
46 +{{layout-section ac:type="single"}}
47 +{{layout-cell}}
19 19  == Nutzung aus Lerner-Sicht ==
20 20  
50 +\\
21 21  
52 +(% class="wrapped" %)
22 22  |(((
23 23  Hat der Kursautor für einen Kursbaustein Aufgabe die Bewertung im Peer Review-Verfahren vorgesehen, erscheint beim Aufgabenbaustein der Abschnitt **Informationen zum Ablauf des Peer Review**.
24 24  )))|(((
25 25  (% class="content-wrapper" %)
26 26  (((
27 -[[image:attach:Kursrun - Aufgabe mit PeerReview_de.png||data-xwiki-image-style="img-screen" data-xwiki-image-style-border="true" width="500"]]
58 +[[image:attach:Kursrun - Aufgabe mit PeerReview_de.png]]
28 28  )))
29 29  )))
30 30  |(((
... ... @@ -32,7 +32,7 @@
32 32  )))|(((
33 33  (% class="content-wrapper" %)
34 34  (((
35 -[[image:attach:Kursrun - Ablauf PeerReview_de.png||data-xwiki-image-style="img-screen" data-xwiki-image-style-border="true" width="500"]]
66 +[[image:attach:Kursrun - Ablauf PeerReview_de.png]]
36 36  )))
37 37  )))
38 38  |(((
... ... @@ -47,19 +47,18 @@
47 47  )))|(((
48 48  (% class="content-wrapper" %)
49 49  (((
50 -[[image:attach:Kursrun - Lösung abgeben_de.png||data-xwiki-image-style="img-screen" data-xwiki-image-style-border="true" width="500"]]
81 +[[image:attach:Kursrun - Lösung abgeben_de.png]]
51 51  )))
52 52  )))
53 53  
85 +=== 1. Review anderer Aufgabenlösungen durchführen ===
54 54  
55 -=== 1. Review anderer Aufgabenlösungen durchführen ===
87 +Ist der Reviewbereich freigegeben, erscheint eine entsprechende Aufforderung. Sie sehen den Bereich **Reviews r andere Teilnehmer abgeben**. Mit Klick auf den Button** Review starten** beginnt die Reviewvergabe.
56 56  
89 +[[image:attach:Kursrun - Review vergeben_de.png]]
57 57  
58 -Ist der Reviewbereich freigegeben, erscheint eine entsprechende Aufforderung. Sie sehen den Bereich **Reviews für andere Teilnehmer abgeben**. Mit Klick auf den Button** Review starten** beginnt die Reviewvergabe.
59 -
60 -[[image:attach:Kursrun - Review vergeben_de.png||data-xwiki-image-style="img-screen" data-xwiki-image-style-border="true" width="500"]]
61 -
62 62  {{expand title="Starten Sie den Review-Prozess ..."}}
92 +(% class="wrapped" %)
63 63  |(% colspan="2" %)(% colspan="2" %)
64 64  (((
65 65  (% class="content-wrapper" %)
... ... @@ -66,6 +66,7 @@
66 66  (((
67 67  Mit Klick auf den Button **Review starten** öffnet sich das Reviewformular. Bewerten Sie im Formular die Aufgabenlösung eines anderen Nutzers entsprechend den Reviewvorgaben Ihres Tutors. Das Formular enthält folgende Informationen:
68 68  
99 +(% class="wrapped" %)
69 69  |(% class="numberingColumn" %)(% class="numberingColumn" %)
70 70  (((
71 71  1
... ... @@ -75,7 +75,7 @@
75 75  (((
76 76  (% class="content-wrapper" %)
77 77  (((
78 -[[image:attach:Kursrun - Reviewformular füllen_de.png||data-xwiki-image-style="img-screen" data-xwiki-image-style-border="true" width="500"]]
109 +[[image:attach:Kursrun - Reviewformular füllen_de.png]]
79 79  )))
80 80  )))
81 81  |(% class="numberingColumn" %)(% class="numberingColumn" %)
... ... @@ -122,7 +122,7 @@
122 122  (((
123 123  (% class="content-wrapper" %)
124 124  (((
125 -[[image:attach:Kursrun - Reviewdialog Mindestanzahl_de.png||data-xwiki-image-style="img-screen" data-xwiki-image-style-border="true" width="500"]]
156 +[[image:attach:Kursrun - Reviewdialog Mindestanzahl_de.png]]
126 126  )))
127 127  )))
128 128  |(% colspan="1" %)(% colspan="1" %)
... ... @@ -134,7 +134,7 @@
134 134  (((
135 135  (% class="content-wrapper" %)
136 136  (((
137 -[[image:attach:Kursrun - vergebene Review einsehen_de.png||data-xwiki-image-style="img-screen" data-xwiki-image-style-border="true" width="500"]]
168 +[[image:attach:Kursrun - vergebene Review einsehen_de.png]]
138 138  )))
139 139  )))
140 140  |(% colspan="1" %)(% colspan="1" %)
... ... @@ -141,30 +141,31 @@
141 141  (((
142 142  Den weiteren Ablauf des Reviewverfahrens können Sie im Informationsbereich einsehen.
143 143  
144 -
175 +\\
145 145  )))|(% colspan="1" %)(% colspan="1" %)
146 146  (((
147 -
178 +(% class="content-wrapper" %)
148 148  (((
149 -[[image:attach:Kursrun - Ablauf PeerReview2_de.png||data-xwiki-image-style="img-screen" data-xwiki-image-style-border="true" width="500"]]
180 +[[image:attach:Kursrun - Ablauf PeerReview2_de.png]]
150 150  )))
151 151  )))
152 152  
153 -
184 +**
185 +**
154 154  {{/expand}}
155 155  
188 +=== 2. Feedback zu vorliegenden Reviews eigener Aufgabenlösungen abgeben**
189 +** ===
156 156  
157 -=== 2. Feedback zu vorliegenden Reviews eigener Aufgabenlösungen abgeben ===
158 -
159 -
160 160  Der Kursersteller kann Ihnen die Möglichkeit einräumen, dass Sie sich zu Reviews, welche Sie zur eigenen Aufgabenlösung erhalten haben, äußern. In diesem Fall sehen Sie den Bereich **Feedback für erhaltene Reviews abgegeben**. Starten Sie Funktion mit Klick auf den Button **Feedback vergeben**.
161 161  
162 -[[image:attach:Kursrun - Feedback vergeben_de.png||data-xwiki-image-style="img-screen" data-xwiki-image-style-border="true" width="500"]]
193 +[[image:attach:Kursrun - Feedback vergeben_de.png]]
163 163  
164 164  {{expand title="Feedbackprozess starten ..."}}
165 165  (% class="auto-cursor-target" %)
166 166  Es öffnet sich das Feedbackformular. Bewerten Sie im Formular das erhaltene Review entsprechend den Vorgaben Ihres Tutors. Das Formular enthält folgende Informationen:
167 167  
199 +(% class="wrapped" %)
168 168  |(% class="numberingColumn" %)(% class="numberingColumn" %)
169 169  (((
170 170  1
... ... @@ -171,12 +171,12 @@
171 171  )))|(((
172 172  Eine Angabe, **wie viele Feedbacks **von Ihnen gefordert werden.
173 173  
174 -
206 +\\
175 175  )))|(% rowspan="6" %)(% rowspan="6" %)
176 176  (((
177 177  (% class="content-wrapper" %)
178 178  (((
179 -[[image:attach:Kursrun - Feedback Formular_de.png||data-xwiki-image-style="img-screen" data-xwiki-image-style-border="true" width="500"]]
211 +[[image:attach:Kursrun - Feedback Formular_de.png]]
180 180  )))
181 181  )))
182 182  |(% class="numberingColumn" %)(% class="numberingColumn" %)
... ... @@ -186,7 +186,7 @@
186 186  (((
187 187  Das gerade geöffnete Feedback.
188 188  
189 -
221 +\\
190 190  )))
191 191  |(% class="numberingColumn" %)(% class="numberingColumn" %)
192 192  (((
... ... @@ -225,23 +225,24 @@
225 225  {{/tip}}
226 226  {{/expand}}
227 227  
228 -=== 3. Anzeige der erhaltenen Gesamtbewertung ===
260 +=== 3. Anzeige der erhaltenen Gesamtbewertung ===
229 229  
230 230  Für die Berechnung und Anzeige der Gesamtbewertung hat der Kursersteller sehr viele Freiheiten. Den Zeitraum und die gewählte Konfiguration können Sie jederzeit im Abschnitt [[Informationen zum Ablauf des Peer Review>>doc:||anchor="Informationen"]] überprüfen.
231 231  
232 232  Ist die Bewertung verfügbar, wird sie im oberen Seitenabschnitt angezeigt. Mit dem Button **Auswertung anzeigen** können Sie eine detaillierte Übersicht der erfolgten Bewertung öffnen.
233 233  
234 -[[image:attach:Kursrun - Auswertung anzeigen_de.png||data-xwiki-image-style="img-screen" data-xwiki-image-style-border="true" width="500"]]
266 +[[image:attach:Kursrun - Auswertung anzeigen_de.png]]
235 235  
236 236  {{expand title="Auswertung einsehen ..."}}
269 +(% class="wrapped" %)
237 237  |(((
238 238  Nach Klick auf den Button **Auswertung anzeigen** öffnet sich ein Dialogfenster, in dem die Bewertung zu allen erhaltenen Reviews und ggf. die dazu vergebenen Feedbacks in einer tabellarischen Übersicht angezeigt werden.
239 239  
240 -Unter der Tabelle befindet sich der Button** Reviews anzeigen**. Mit Klick auf den Button öffnet sich die Detailansicht.
273 +Unter der Tabelle befindet sich der Button** Reviews anzeigen**. Mit Klick auf den Button öffnet sich die Detailansicht.
241 241  )))|(((
242 242  (% class="content-wrapper" %)
243 243  (((
244 -[[image:attach:Kursrun - Auswertung öffnen_de.png||data-xwiki-image-style="img-screen" data-xwiki-image-style-border="true" width="500"]]
277 +[[image:attach:Kursrun - Auswertung öffnen_de.png]]
245 245  )))
246 246  )))
247 247  |(((
... ... @@ -249,17 +249,18 @@
249 249  )))|(((
250 250  (% class="content-wrapper" %)
251 251  (((
252 -[[image:attach:Kursrun - Auswertung Detailansicht_de.png||data-xwiki-image-style="img-screen" data-xwiki-image-style-border="true" width="500"]]
285 +[[image:attach:Kursrun - Auswertung Detailansicht_de.png]]
253 253  )))
254 254  )))
255 255  |(% colspan="1" %)(% colspan="1" %)
256 256  (((
257 -(% style="color:#000000" %)In der Spalte Status sind folgende Einträge möglich:
290 +(% style="color: rgb(0,0,0);" %)In der Spalte Status sind folgende Einträge möglich:
258 258  
292 +(% class="wrapped" %)
259 259  |(((
260 260  (% class="content-wrapper" %)
261 261  (((
262 -[[image:attach:Icon_Auswertung Review Expertenreview_de.png||data-xwiki-image-style="img-icon"]]
296 +[[image:attach:Icon_Auswertung Review Expertenreview_de.png]]
263 263  )))
264 264  )))|(((
265 265  Dieses Review wurde von einem Kursverantwortlichen erstellt. Expertenreviews können nicht als unangemessen gemeldet werden.
... ... @@ -268,7 +268,7 @@
268 268  (((
269 269  (% class="content-wrapper" %)
270 270  (((
271 -[[image:attach:Icon_Auswertung Review Prüfung ausstehend_de.png||data-xwiki-image-style="img-icon"]]
305 +[[image:attach:Icon_Auswertung Review Prüfung ausstehend_de.png]]
272 272  )))
273 273  )))|(% colspan="1" %)(% colspan="1" %)
274 274  (((
... ... @@ -277,13 +277,13 @@
277 277  |(((
278 278  (% class="content-wrapper" %)
279 279  (((
280 -[[image:attach:Icon_Auswertung Review Akzeptiert_de.png||data-xwiki-image-style="img-icon"]]
314 +[[image:attach:Icon_Auswertung Review Akzeptiert_de.png]]
281 281  )))
282 282  )))|(((
283 283  Der Reviewprozess wird von einem Kursverantwortlichen aktiv begleitet. Er moderiert die endgültige Punktevergabe und hat dieses Review als Teil der Bewertung bestätigt. Es ist damit Teil der Gesamtbewertung.
284 284  )))
285 285  |(((
286 -[[image:attach:Icon_Auswertung Review Abgelehnt_de.png||data-xwiki-image-style="img-icon"]]
320 +[[image:attach:Icon_Auswertung Review Abgelehnt_de.png]]
287 287  )))|(((
288 288  Der Reviewprozess wird von einem Kursverantwortlichen aktiv begleitet. Er moderiert die endgültige Punktevergabe und hat dieses Review als Teil der Bewertung abgelehnt. Es fließt nicht in die Gesamtbewertung ein.
289 289  )))
... ... @@ -290,7 +290,7 @@
290 290  |(((
291 291  (% class="content-wrapper" %)
292 292  (((
293 -[[image:attach:Icon_Gemeldet_de.png||data-xwiki-image-style="img-icon"]]
327 +[[image:attach:Icon_Gemeldet_de.png]]
294 294  )))
295 295  )))|(((
296 296  Sie haben dieses Review als unangemessen gemeldet. Es hat aber noch kein Kursverantwortlicher darauf reagiert.
... ... @@ -297,38 +297,44 @@
297 297  )))
298 298  |(% colspan="1" %)(% colspan="1" %)
299 299  (((
300 -[[image:attach:Icon_wird ignoriert_de.png||data-xwiki-image-style="img-icon"]]
334 +[[image:attach:Icon_wird ignoriert_de.png]]
301 301  )))|(% colspan="1" %)(% colspan="1" %)
302 302  (((
303 303  Sie haben dieses Review als unangemessen gemeldet. Ein Kursverantwortlicher hat Ihrer Meldung zugestimmt. Dieses Review fließt nicht in die Gesamtbewertung ein.
304 304  )))
305 305  |(((
306 -[[image:attach:Icon_wird akzeptiert_de.png||data-xwiki-image-style="img-icon"]]
340 +[[image:attach:Icon_wird akzeptiert_de.png]]
307 307  )))|(((
308 308  Sie haben dieses Review als unangemessen gemeldet. Ein Kursverantwortlicher hat Ihrer Meldung zurückgewiesen. Dieses Review fließt in die Gesamtbewertung ein.
309 309  )))
310 310  
311 311  (% style="color: rgb(0,0,0);" %)
312 -
346 +
313 313  )))|(% colspan="1" %)(% colspan="1" %)
314 314  (((
315 315  (% class="content-wrapper" %)
316 316  (((
317 -[[image:attach:Kursrun - Status zu Reviews_de.png||data-xwiki-image-style="img-screen" data-xwiki-image-style-border="true" width="500"]]
351 +[[image:attach:Kursrun - Status zu Reviews_de.png]]
318 318  )))
319 319  )))
320 320  {{/expand}}
355 +{{/layout-cell}}
356 +{{/layout-section}}
321 321  
358 +{{layout-section ac:type="single"}}
359 +{{layout-cell}}
322 322  
361 +
323 323  {{id name="Autoren"/}}
324 324  
325 325  == Nutzung aus Autoren-Sicht ==
326 326  
327 -=== Konfiguration des Peer Review im Kurseditor ===
366 +=== Konfiguration des Peer Review im Kurseditor
367 + ===
328 328  
329 329  Im Kursbaustein **Aufgabe** können Sie als Autor die Bewertung per Peer Review aktivieren. Markieren Sie dazu im Tab **Bewertung** die Checkbox **Peer Review aktivieren**.
330 330  
331 -[[image:attach:Editor - PeerReview aktivieren_de.png||data-xwiki-image-style="img-screen" data-xwiki-image-style-border="true" width="500"]]
371 +[[image:attach:Editor - PeerReview aktivieren_de.png]]
332 332  
333 333  Anschließend öffnen sich weitere Konfigurationsabschnitte, in denen sich die Reviewphasen wiederfinden:
334 334  
... ... @@ -336,18 +336,16 @@
336 336  * **2. Schritt: Feedback (optional)**
337 337  * **3. Schritt: Ergebnisanzeige**
338 338  
339 -[[image:attach:Editor - PeerReview Abschnitte_de.png||data-xwiki-image-style="img-screen" data-xwiki-image-style-border="true" width="500"]]
379 +[[image:attach:Editor - PeerReview Abschnitte_de.png]]
340 340  
341 341  Nachdem Sie die Funktion Peer Review für Ihre Aufgabe aktiviert haben, können Sie die Einstellungen entsprechend Ihrer Bedürfnisse anpassen.
342 342  
343 -
344 344  === Konfiguration zum 1. Schritt: Review ===
345 345  
346 -
347 347  Legen Sie im ersten Abschnitt Rahmenbedingungen für die Reviewvergabe fest.
348 348  
349 349  {{expand title="Konfiguration im Abschnitt Review ..."}}
350 -
388 +(% class="wrapped" %)
351 351  |(% class="numberingColumn" %)(% class="numberingColumn" %)
352 352  (((
353 353  1
... ... @@ -357,7 +357,7 @@
357 357  (((
358 358  (% class="content-wrapper" %)
359 359  (((
360 -[[image:attach:Editor - Peer Review Reviewvergabe konfigurieren_de.png||data-xwiki-image-style="img-screen" data-xwiki-image-style-border="true" width="500"]]
398 +[[image:attach:Editor - Peer Review Reviewvergabe konfigurieren_de.png]]
361 361  )))
362 362  )))
363 363  |(% class="numberingColumn" %)(% class="numberingColumn" %)
... ... @@ -383,7 +383,7 @@
383 383  **Konfigurieren Sie die Review-Vorlage:**
384 384  
385 385  * Optional können Sie im Textfeld **Hinweise für den Reviewer** eintragen.
386 -* Wählen Sie die gewünschte** Punktevergabe**. Es stehen Ihnen die Optionen //Gesamtpunktzahl vergeben// und //Punkte je Freitextfeld// zur Verfügung.
424 +* Wählen Sie die gewünschte** Punktevergabe**. Es stehen Ihnen die Optionen //Gesamtpunktzahl vergeben// und //Punkte je Freitextfeld// zur Verfügung.
387 387  * Geben Sie die **Punktzahl** an, die die Reviewer **maximal** vergeben können.
388 388  * Fügen Sie optional weitere **Freitextfelder** hinzu.
389 389  * Wählen Sie die Option //Dokumente - Reviewer dürfen Dateien hochladen// aus, wenn die Teilnehmer **Dateien innerhalb des Review** hinzufügen sollen.
... ... @@ -395,6 +395,8 @@
395 395  **Speichern** Sie Ihre Eingaben.
396 396  )))
397 397  
436 +\\
437 +
398 398  {{info title="Hinweis"}}
399 399  Um die gleichmäßige Verteilung der Reviews zu gewährleisten, empfehlen wir, jeweils konkrete Zeiträume für die Abgabe der Aufgabe, der Review-Phase und der Feedback-Phase festzulegen. Die Beschränkung des Abgabezeitraums der Aufgaben stellen Sie im Zugangs-Tab des Kursbausteins **Aufgabe** ein (Zugang>Abgabeordner>Datumsabhängig). So verhindern Sie die Abgabe von Aufgaben, wenn die Review-Phase bereits begonnen hat.
400 400  {{/info}}
... ... @@ -402,26 +402,27 @@
402 402  
403 403  === Konfiguration zum 2. Schritt: Feedback (optional) ===
404 404  
405 -Optional können Sie Ihren Nutzern die Möglichkeit einrichten, Feedback auf erhaltene Reviews zu geben. Klicken Sie auf die Checkbox **Der Teilnehmer kann Feedback zu den erhaltenen Reviews geben**, um den Feedbackprozess zu konfigurieren.
445 +Optional können Sie Ihren Nutzern die Möglichkeit einrichten, Feedback auf erhaltene Reviews zu geben. Klicken Sie auf die Checkbox **Der Teilnehmer kann Feedback zu den erhaltenen Reviews geben**, um den Feedbackprozess zu konfigurieren.\\
406 406  
407 -[[image:attach:Editor - Peer Review Feedbackvergabe aktivieren_de.png||data-xwiki-image-style="img-screen" data-xwiki-image-style-border="true" width="500"]]
447 +[[image:attach:Editor - Peer Review Feedbackvergabe aktivieren_de.png]]
408 408  
409 409  {{expand title="Konfiguration im Abschnitt Feedback ..."}}
410 410  (% class="auto-cursor-target" %)
411 411  Das Aktivieren dieser Option öffnet für Sie weitere Einstellungsmöglichkeiten.
412 412  
453 +(% class="wrapped" %)
413 413  |(% class="numberingColumn" %)(% class="numberingColumn" %)
414 414  (((
415 415  1
416 416  )))|(% colspan="1" %)(% colspan="1" %)
417 417  (((
418 -**Zeitraum: **Legen Sie ein Zeitfenster fest, in welchem Nutzer Feedback zu Reviews ihrer Aufgabenlösung geben können.
459 +**Zeitraum: **Legen Sie ein Zeitfenster fest, in welchem Nutzer Feedback zu Reviews ihrer Aufgabenlösung geben können.
419 419  Innerhalb dieses Zeitfensters können eingereichte Feedbacks beliebig vom Ersteller verändert werden.
420 420  )))|(% rowspan="3" %)(% rowspan="3" %)
421 421  (((
422 422  (% class="content-wrapper" %)
423 423  (((
424 -[[image:Editor- Peer Review Feedbackvergabe konfigurieren_de.png||data-xwiki-image-style="img-screen" data-xwiki-image-style-border="true" width="500"]]
465 +[[image:attach: Editor- Peer Review Feedbackvergabe konfigurieren_de.png]]
425 425  )))
426 426  )))
427 427  |(% class="numberingColumn" %)(% class="numberingColumn" %)
... ... @@ -432,7 +432,7 @@
432 432  **Konfigurieren Sie die Feedback-Vorlage:**
433 433  
434 434  * Optional können Sie im Textfeld **Hinweise zum Feedback** eintragen.
435 -* Wählen Sie die gewünschte** Punktevergabe**. Es stehen Ihnen die Optionen //Gesamtpunktzahl vergeben// und //Punkte je Freitextfeld// zur Verfügung. Die Punktebewertung innerhalb eines Feedbacks dient der qualitativen Bewertung von Reviews.
476 +* Wählen Sie die gewünschte** Punktevergabe**. Es stehen Ihnen die Optionen //Gesamtpunktzahl vergeben// und //Punkte je Freitextfeld// zur Verfügung. Die Punktebewertung innerhalb eines Feedbacks dient der qualitativen Bewertung von Reviews.
436 436  * Fügen Sie optional weitere **Freitextfelder** hinzu.
437 437  )))
438 438  |(% class="numberingColumn" %)(% class="numberingColumn" %)
... ... @@ -448,17 +448,18 @@
448 448  Legen Sie hier die Einstellungen zur Anzeige der Gesamtergebnisse für die Teilnehmer fest.
449 449  
450 450  {{expand title="Konfiguration im Abschnitt Ergebnisanzeige ..."}}
451 -
492 +(% class="wrapped" %)
452 452  |(% class="numberingColumn" %)(% class="numberingColumn" %)
453 453  (((
454 454  1
455 455  )))|(((
456 -(% style="color:#333333" %)Legen Sie einen **Zeitraum **fest, in dem Nutzer die Bewertungsergebnisse einsehen können. Wenn Sie beide Felder leer lassen, sieht der Nutzer seine Ergebnisse, sobald die Bedingungen erfüllt sind.
497 +(% style="color: rgb(51,51,51);" %)Legen Sie einen **Zeitraum **fest, in dem Nutzer die Bewertungsergebnisse einsehen können. Wenn Sie beide Felder leer lassen, sieht der Nutzer seine Ergebnisse, sobald die Bedingungen erfüllt sind.
498 +
457 457  )))|(% rowspan="2" %)(% rowspan="2" %)
458 458  (((
459 459  (% class="content-wrapper" %)
460 460  (((
461 -[[image:attach:Editor - Ergebninsanzeige konfigurieren_de.png||data-xwiki-image-style="img-screen" data-xwiki-image-style-border="true" width="500"]]
503 +[[image:attach:Editor - Ergebninsanzeige konfigurieren_de.png]]
462 462  )))
463 463  )))
464 464  |(% class="numberingColumn" %)(% class="numberingColumn" %)
... ... @@ -467,15 +467,15 @@
467 467  )))|(((
468 468  (% class="content-wrapper" %)
469 469  (((
470 -(% style="color:#333333" %)Legen Sie die **Bedingungen** fest, welche für die Anzeige der Gesamtbewertung notwendig sind. Es müssen immer alle festgelegten Bedingungen erfüllt sein, damit die Ergebnisse den Nutzern angezeigt werden. (Die Bedingungen werden durch **UND **verknüpft.)
512 +(% style="color: rgb(51,51,51);" %)Legen Sie die **Bedingungen** fest, welche für die Anzeige der Gesamtbewertung notwendig sind. Es müssen immer alle festgelegten Bedingungen erfüllt sein, damit die Ergebnisse den Nutzern angezeigt werden. (Die Bedingungen werden durch **UND **verknüpft.)
471 471  
472 -(% style="color:#333333" %)Wählen Sie zwischen
514 +(% style="color: rgb(51,51,51);" %)Wählen Sie zwischen
473 473  
474 474  
475 -* (% style="color:#333333" %)Gesamtbewertung (%%)erst anzeigen, wenn für die (% style="text-align:left" %)**Aufgabe**
476 -** (% style="color:#333333" %)die Mindestanzahl an Reviews vorliegt (d. h. wenn der Nutzer für seine Lösung die festgelegte Mindestanzahl an Reviews erhalten hat)
477 -** (% style="color:#333333" %)die Bewertung durch den Tutor freigeschalten wurde (d. h. ein Peer Review mit aktiver Moderation durch den Tutor)
478 -* (% style="color:#333333" %)Gesamtbewertung (%%)erst anzeigen, wenn der (% style="text-align:left" %)**Teilnehmer**
517 +* (% style="color: rgb(51,51,51);" %)Gesamtbewertung (%%)erst anzeigen, wenn für die (% style="text-align: left;" %)**Aufgabe**
518 +** (% style="color: rgb(51,51,51);" %)die Mindestanzahl an Reviews vorliegt (d. h. wenn der Nutzer für seine Lösung die festgelegte Mindestanzahl an Reviews erhalten hat)
519 +** (% style="color: rgb(51,51,51);" %)die Bewertung durch den Tutor freigeschalten wurde (d. h. ein Peer Review mit aktiver Moderation durch den Tutor)
520 +* (% style="color: rgb(51,51,51);" %)Gesamtbewertung (%%)erst anzeigen, wenn der (% style="text-align: left;" %)**Teilnehmer**
479 479  ** die Mindestanzahl an Reviews abgegeben hat
480 480  ** für die erhaltenen Reviews Feedback abgegeben hat
481 481  
... ... @@ -491,22 +491,35 @@
491 491  {{/info}}
492 492  {{/expand}}
493 493  
536 +(% class="auto-cursor-target" %)
494 494  
495 495  )))
496 496  )))
497 497  
498 498  {{note title="Deaktivierte Feedbackoption"}}
499 -Im Bewertungswerkzeug können **berechtigte Nutzer** (z. B. Kursverantwortliche)** jederzeit alle Lösungsvorschläge und zugehörige Reviews sowie Feedbacks einsehen**.
542 +Im Bewertungswerkzeug können **berechtigte Nutzer** (z. B. Kursverantwortliche)** jederzeit alle Lösungsvorschläge und zugehörige Reviews sowie Feedbacks einsehen**.
500 500  
501 501  **Kursnutzer** können jedoch - bei deaktivierter Feedback-Option - die für ihre Lösung erhaltenen Reviews **erst mit Freischalten der (Gesamt)Ergebnisse** sehen. (Die Möglichkeit, ein als unangemessen empfundenes Review zu melden, haben sie dann ebenfalls erst zu diesem Zeitpunkt.)
502 502  {{/note}}
503 503  {{/expand}}
547 +{{/layout-cell}}
548 +{{/layout-section}}
504 504  
505 -== Gesamtergebnisse zum Reviewprozess ==
550 +{{layout-section ac:type="single"}}
551 +{{layout-cell}}
552 +\\
553 +{{/layout-cell}}
554 +{{/layout-section}}
506 506  
556 +{{layout-section ac:type="single"}}
557 +{{layout-cell}}
558 +== Gesamtergebnisse zum Reviewprozess
559 + ==
560 +
507 507  Als Autor haben Sie zu jeder Zeit im **Bewertungswerkzeug** einen Überblick darüber, welcher Nutzer (eine Aufgabe gezogen), eine Lösung abgegeben, ein Review eingereicht oder ein Feedback verfasst hat.
562 +\\
508 508  
509 -[[image:attach:Bewertungswerkzeug - Übersicht zum Peer Review_de.png||data-xwiki-image-style="img-screen" data-xwiki-image-style-border="true" width="500"]]
564 +[[image:attach:Bewertungswerkzeug - Übersicht zum Peer Review_de.png]]
510 510  
511 511  In dieser Tabelle können Sie zusätzlich die von den angezeigten Nutzern vergebenen Reviews und deren Status einsehen oder in die Einzelbewertungsansicht eines Nutzers wechseln.
512 512  
... ... @@ -514,14 +514,14 @@
514 514  Die Zuordnung der Nutzernamen zu Aufgabenlösungen, Reviews oder Feedback sind jedoch nur im Bewertungswerkzeug sichtbar, nicht aber für die Teilnehmer in der Kursansicht oder den Dialogen zur Review- oder Feedbackvergabe.
515 515  {{/info}}
516 516  
517 -
518 518  === Übersicht im Bewertungswerkzeug aufrufen ===
519 519  
520 520  Um den Stand zum Reviewprozess im Bewertungswerkzeug aufzurufen, gehen Sie wie folgt vor:
521 521  
522 522  {{expand title="Übersicht im Bewertungswerkzeug aufrufen ..."}}
577 +\\
523 523  
524 -
579 +(% class="wrapped" %)
525 525  |(((
526 526  (% class="content-wrapper" %)
527 527  (((
... ... @@ -530,7 +530,7 @@
530 530  )))|(((
531 531  (% class="content-wrapper" %)
532 532  (((
533 -[[image:attach:Kursrun - Bewertungswerkzeug öffnen_de.png||data-xwiki-image-style="img-screen" data-xwiki-image-style-border="true" width="500"]]
588 +[[image:attach:Kursrun - Bewertungswerkzeug öffnen_de.png]]
534 534  )))
535 535  )))
536 536  |(((
... ... @@ -538,7 +538,7 @@
538 538  )))|(((
539 539  (% class="content-wrapper" %)
540 540  (((
541 -[[image:attach:Bewertungswerkzeug - Nach Kursstruktur_de.png||data-xwiki-image-style="img-screen" data-xwiki-image-style-border="true" width="500"]]
596 +[[image:attach:Bewertungswerkzeug - Nach Kursstruktur_de.png]]
542 542  )))
543 543  )))
544 544  |(((
... ... @@ -546,7 +546,7 @@
546 546  )))|(((
547 547  (% class="content-wrapper" %)
548 548  (((
549 -[[image:attach:Bewertungswerkzeug - Gruppenauswahl_de.png||data-xwiki-image-style="img-screen" data-xwiki-image-style-border="true" width="500"]]
604 +[[image:attach:Bewertungswerkzeug - Gruppenauswahl_de.png]]
550 550  )))
551 551  )))
552 552  |(((
... ... @@ -554,7 +554,7 @@
554 554  )))|(((
555 555  (% class="content-wrapper" %)
556 556  (((
557 -[[image:attach:Bewertungswerkzeug - Übersicht zum Peer Review_de.png||data-xwiki-image-style="img-screen" data-xwiki-image-style-border="true" width="500"]]
612 +[[image:attach:Bewertungswerkzeug - Übersicht zum Peer Review_de.png]]
558 558  )))
559 559  )))
560 560  {{/expand}}
... ... @@ -563,6 +563,7 @@
563 563  Die geöffnete Tabelle enthält **Informationen zum Stand des Reviewprozesses aller Nutzer **der gewählten Gruppe.
564 564  
565 565  {{expand title="Informationen in der Detailansicht ..."}}
621 +(% class="wrapped" %)
566 566  |(% class="numberingColumn" %)(% class="numberingColumn" %)
567 567  (((
568 568  1
... ... @@ -574,7 +574,7 @@
574 574  (((
575 575  (% class="content-wrapper" %)
576 576  (((
577 -[[image:attach:Bewertungswerkzeug - Informationen der Tabelle_de.png||data-xwiki-image-style="img-screen" data-xwiki-image-style-border="true" width="500"]]
633 +[[image:attach:Bewertungswerkzeug - Informationen der Tabelle_de.png]]
578 578  )))
579 579  )))
580 580  |(% class="numberingColumn" %)(% class="numberingColumn" %)
... ... @@ -591,12 +591,12 @@
591 591  )))|(((
592 592  (% class="content-wrapper" %)
593 593  (((
594 -[[image:attach:Icon_Warnung.png||data-xwiki-image-style="img-icon"]]Gemeldete Reviews
650 +[[image:attach:Icon_Warnung.png]]Gemeldete Reviews
595 595  )))
596 596  )))|(((
597 597  (% class="content-wrapper" %)
598 598  (((
599 -Das Icon[[image:attach:Icon_Warnung.png||data-xwiki-image-style="img-icon"]]signalisiert, dass mindestens ein Review dieses Nutzers als unangemessen gemeldet wurde. Details sehen Sie, wenn Sie den Link anklicken.
655 +Das Icon[[image:attach:Icon_Warnung.png]]signalisiert, dass mindestens ein Review dieses Nutzers als unangemessen gemeldet wurde. Details sehen Sie, wenn Sie den Link anklicken.
600 600  )))
601 601  )))
602 602  |(% class="numberingColumn" %)(% class="numberingColumn" %)
... ... @@ -606,7 +606,7 @@
606 606  (((
607 607  (% class="content-wrapper" %)
608 608  (((
609 -[[image:attach:Icon_Reviewanzahl reicht nicht aus_de.png||data-xwiki-image-style="img-icon"]]Anzahl der Reviews reicht nicht aus
665 +[[image:attach:Icon_Reviewanzahl reicht nicht aus_de.png]]Anzahl der Reviews reicht nicht aus
610 610  )))
611 611  )))|(% colspan="1" %)(% colspan="1" %)
612 612  (((
... ... @@ -621,7 +621,7 @@
621 621  )))|(((
622 622  (% class="content-wrapper" %)
623 623  (((
624 -[[image:attach:Icon_Tabelle anpassen_de.png||data-xwiki-image-style="img-icon"]]
680 +[[image:attach:Icon_Tabelle anpassen_de.png]]
625 625  )))
626 626  )))|(((
627 627  (% class="content-wrapper" %)
... ... @@ -631,9 +631,10 @@
631 631  )))
632 632  {{/expand}}
633 633  
634 -Wenn Sie stattdessen die **Detailbewertungsansicht** **eines Nutzers** öffnen, erhalten Sie Informationen zum **Reviewprozess **der Lösung** dieses Nutzers**.
690 +Wenn Sie stattdessen die **Detailbewertungsansicht** **eines Nutzers** öffnen, erhalten Sie Informationen zum **Reviewprozess **der Lösung** dieses Nutzers**.
635 635  
636 636  {{expand title="Informationen in der Detailansicht ..."}}
693 +(% class="wrapped" %)
637 637  |(% class="numberingColumn" %)(% class="numberingColumn" %)
638 638  (((
639 639  1
... ... @@ -641,7 +641,7 @@
641 641  Gewählter Kursbaustein
642 642  )))|(% rowspan="3" %)(% rowspan="3" %)
643 643  (((
644 -[[image:attach:Bewertungswerkzeug - Detailansicht1_de.png||data-xwiki-image-style="img-screen" data-xwiki-image-style-border="true" width="500"]]
701 +[[image:attach:Bewertungswerkzeug - Detailansicht1_de.png]]
645 645  )))
646 646  |(% class="numberingColumn" colspan="1" %)(% class="numberingColumn" colspan="1" %)
647 647  (((
... ... @@ -664,7 +664,7 @@
664 664  Erhaltene Reviews und Status der Reviews
665 665  )))|(% rowspan="4" %)(% rowspan="4" %)
666 666  (((
667 -[[image:attach:Bewertungswerkzeug - Detailansicht2_de.png||data-xwiki-image-style="img-screen" data-xwiki-image-style-border="true" width="500"]]
724 +[[image:attach:Bewertungswerkzeug - Detailansicht2_de.png]]
668 668  )))
669 669  |(% class="numberingColumn" %)(% class="numberingColumn" %)
670 670  (((
... ... @@ -686,11 +686,12 @@
686 686  )))
687 687  {{/expand}}
688 688  
746 +(% class="Textbody" %)
689 689  
690 690  
691 691  {{id name="unangemessen"/}}
692 692  
693 -(% id="HUnangemessenesReviewbearbeiten" class="Textbody" %)
751 +(% class="Textbody" %)
694 694  === Unangemessenes Review bearbeiten ===
695 695  
696 696  (% class="Textbody" %)
... ... @@ -701,18 +701,18 @@
701 701  |(((
702 702  (% class="content-wrapper" %)
703 703  (((
704 -[[image:attach:Icon_Gemeldet_de.png||data-xwiki-image-style="img-icon"]]
762 +[[image:attach:Icon_Gemeldet_de.png]]
705 705  )))
706 706  )))|(((
707 707  (% class="content-wrapper" %)
708 708  (((
709 -Hat der Nutzer ein Review als unangemessen gemeldet, erscheint in der Spalte Review-Status der Eintrag „Gemeldet“. Öffnen Sie nun die Detailansicht des entsprechenden Reviews. Im sich öffnenden Dialog urteilen Sie über die Meldung. Wählen Sie zwischen  [[image:attach:Icon_Review ignorieren_de.png||data-xwiki-image-style="img-icon"]] und [[image:attach:Icon_Review akzeptieren_de.png||data-xwiki-image-style="img-icon"]].
767 +Hat der Nutzer ein Review als unangemessen gemeldet, erscheint in der Spalte Review-Status der Eintrag „Gemeldet“. Öffnen Sie nun die Detailansicht des entsprechenden Reviews. Im sich öffnenden Dialog urteilen Sie über die Meldung. Wählen Sie zwischen  [[image:attach:Icon_Review ignorieren_de.png]]und [[image:attach:Icon_Review akzeptieren_de.png]].
710 710  )))
711 711  )))
712 712  |(((
713 713  (% class="content-wrapper" %)
714 714  (((
715 -[[image:attach:Icon_wird ignoriert_de.png||data-xwiki-image-style="img-icon"]]
773 +[[image:attach:Icon_wird ignoriert_de.png]]
716 716  )))
717 717  )))|(((
718 718  Mit Klick auf den Button **Review ignorieren** stimmen Sie dem Einwand des Nutzers zu und das als unangemessen gemeldete Review wird aus der Berechnung der Gesamtauswertung entfernt. Der Review-Status ändert sich von „Gemeldet“ auf **Gemeldet (wird ignoriert)**. Durch den Ausschluss eines Reviews kann die Anzahl der Reviews des Nutzers kleiner sein als die vorgegebene Mindestanzahl. Bitte prüfen Sie deshalb die gesamte Bewertung und passen Sie sie, wenn nötig, über das Bewertungsformular oder per Expertenreview an.
... ... @@ -721,7 +721,7 @@
721 721  (((
722 722  (% class="content-wrapper" %)
723 723  (((
724 -[[image:attach:Icon_wird akzeptiert_de.png||data-xwiki-image-style="img-icon"]]
782 +[[image:attach:Icon_wird akzeptiert_de.png]]
725 725  )))
726 726  )))|(% colspan="1" %)(% colspan="1" %)
727 727  (((
... ... @@ -731,7 +731,7 @@
731 731  (((
732 732  (% class="content-wrapper" %)
733 733  (((
734 -[[image:attach:Icon_Expertenreview_de.png||data-xwiki-image-style="img-icon"]]
792 +[[image:attach:Icon_Expertenreview_de.png]]
735 735  )))
736 736  )))|(% colspan="1" %)(% colspan="1" %)
737 737  (((
... ... @@ -739,11 +739,12 @@
739 739  )))
740 740  {{/expand}}
741 741  
800 +(% class="Textbody" %)
742 742  
743 743  
744 744  {{id name="Moderation"/}}
745 745  
746 -(% id="HPeerReviewmitModeration" class="Textbody" %)
805 +(% class="Textbody" %)
747 747  === Peer Review mit Moderation ===
748 748  
749 749  Wollen Sie als Kursverantwortlicher den Reviewprozess begleiten und die Bewertungen vor Freigabe an die Nutzer kontrollieren, so können Sie dies mit der Option **Ergebnisse erst anzeigen, wenn für die Aufgabe die Bewertung durch den Tutor freigeschalten wurde** einstellen. Konfigurieren Sie diese Option im Kurseditor zum Abschnitt Ergebnisanzeige.
... ... @@ -751,6 +751,7 @@
751 751  Ist die Moderationsfunktion aktiviert, bedeutet dies, dass Sie jedes Review einzeln überprüfen und akzeptieren oder ablehnen müssen. Erst wenn dies abgeschlossen ist, kann die Bewertung übernommen werden.
752 752  
753 753  {{expand title="Bewertungsprozess moderieren ..."}}
813 +(% class="wrapped" %)
754 754  |=(% colspan="1" %)(% colspan="1" %)
755 755  (((
756 756  Review-Status
... ... @@ -764,18 +764,18 @@
764 764  |(((
765 765  (% class="content-wrapper" %)
766 766  (((
767 -[[image:attach:Icon_Prüfung ausstehend_de.png||data-xwiki-image-style="img-icon"]]
827 +[[image:attach:Icon_Prüfung ausstehend_de.png]]
768 768  )))
769 769  )))|(((
770 770  (% class="content-wrapper" %)
771 771  (((
772 -Ist ein moderiertes Peer Review noch nicht geprüft, erscheint in der Spalte Review-Status der Eintrag **Prüfung ausstehend**. Öffnen Sie mit Klick auf den Eintrag "Review anzeigen" die Detailansicht des Reviews und beurteilen Sie dieses mit Klick auf den Button [[image:attach:Icon_Review akzeptieren_de.png||data-xwiki-image-style="img-icon"]]oder[[image:attach:Icon_Review ablehnen_de.png||data-xwiki-image-style="img-icon"]].
832 +Ist ein moderiertes Peer Review noch nicht geprüft, erscheint in der Spalte Review-Status der Eintrag **Prüfung ausstehend**. Öffnen Sie mit Klick auf den Eintrag "Review anzeigen" die Detailansicht des Reviews und beurteilen Sie dieses mit Klick auf den Button [[image:attach:Icon_Review akzeptieren_de.png]]oder[[image:attach:Icon_Review ablehnen_de.png]].
773 773  )))
774 774  )))
775 775  |(((
776 776  (% class="content-wrapper" %)
777 777  (((
778 -[[image:attach:Icon_akzeptiert_de.png||data-xwiki-image-style="img-icon"]]
838 +[[image:attach:Icon_akzeptiert_de.png]]\\
779 779  )))
780 780  )))|(((
781 781  (% class="content-wrapper" %)
... ... @@ -787,7 +787,7 @@
787 787  (((
788 788  (% class="content-wrapper" %)
789 789  (((
790 -[[image:attach:Icon_abgelehnt_de.png||data-xwiki-image-style="img-icon"]]
850 +[[image:attach:Icon_abgelehnt_de.png]]
791 791  )))
792 792  )))|(% colspan="1" %)(% colspan="1" %)
793 793  (((
... ... @@ -802,7 +802,7 @@
802 802  (((
803 803  (% class="content-wrapper" %)
804 804  (((
805 -[[image:attach:Icon_Bewertung übernehmen_de.png||data-xwiki-image-style="img-icon"]]
865 +[[image:attach:Icon_Bewertung übernehmen_de.png]]
806 806  )))
807 807  )))|(% colspan="1" %)(% colspan="1" %)
808 808  (((
... ... @@ -813,20 +813,24 @@
813 813  )))
814 814  {{/expand}}
815 815  
876 +\\
816 816  
817 -[[image:attach:Bewertungswerkzeug - Moderation_de.png||data-xwiki-image-style="img-screen" data-xwiki-image-style-border="true" width="500"]]
878 +[[image:attach:Bewertungswerkzeug - Moderation_de.png]]
818 818  
880 +(% class="Textbody" %)
819 819  
820 820  
821 821  {{id name="Expertenreview"/}}
822 822  
823 -(% id="HExpertenreviewerstellen" class="Textbody" %)
885 +(% class="Textbody" %)
824 824  === Expertenreview erstellen ===
825 825  
826 826  Als Kursverantwortlicher haben Sie jederzeit die Möglichkeit, im Bewertungswerkzeug ebenfalls ein Review für eine Teilnehmerlösung zu erstellen. Das kann je nach Konfiguration notwendig werden, wenn ein Teilnehmer zu wenige Reviews für eine Bewertung erhalten hat, andere Teilnehmer nicht genügend Reviews vergeben haben oder wenn es unangemessene Reviews gab.
827 827  
828 828  {{expand title="Expertenreview durchführen ..."}}
891 +\\
829 829  
893 +(% class="wrapped" %)
830 830  |(((
831 831  Wechseln Sie im Bewertungswerkzeug in die Detailansicht der Bewertung eines Nutzers.
832 832  )))|(% rowspan="3" %)(% rowspan="3" %)
... ... @@ -833,11 +833,12 @@
833 833  (((
834 834  (% class="content-wrapper" %)
835 835  (((
836 -[[image:attach:Bewertungswerkzeug - Expertenreview starten_de.png||data-xwiki-image-style="img-screen" data-xwiki-image-style-border="true" width="500"]]
900 +[[image:attach:Bewertungswerkzeug - Expertenreview starten_de.png]]
837 837  )))
838 838  )))
839 839  |(((
840 -Im Bereich **Erhaltene Peer Reviews** finden Sie unter der Tabelle den Button **Expertenreview abgeben**.
904 +Im Bereich **Erhaltene Peer Reviews** finden Sie unter der Tabelle den Button **Expertenreview abgeben**.//**
905 +**//
841 841  )))
842 842  |(((
843 843  Bei Klick auf den Button öffnet sich das Reviewformular, in dem Sie nun ein Review für den Teilnehmer abgeben können. Für das Expertenreview steht Ihnen das gleiche Formular zur Verfügung, das auch den Teilnehmern für das Review angezeigt wird.
... ... @@ -846,6 +846,8 @@
846 846  )))
847 847  {{/expand}}
848 848  
914 +
915 +
849 849  {{id name="Mindestanzahl"/}}
850 850  
851 851  === Auswirkung der Unterschreitung der Mindestanzahl ===
... ... @@ -852,7 +852,7 @@
852 852  
853 853  Pädagogisches Ziel der Bewertungsform Peer Review ist es, ein [[Peer Assessment>>url:https://de.wikipedia.org/wiki/Peer_Assessment||shape="rect"]] zu ermöglichen. Somit wurde bei der Konzeption dieser Bewertungsform darauf geachtet, sehr viele Grundszenarien zu ermöglichen, und es wurden vor allem die Anonymität und Zufälligkeit der Vergabe von Teilnehmerlösungen zur Begutachtung als Zielkriterium festgelegt.
854 854  
855 -Wenn Sie die Grundeinstellung** Mindestzahl an Reviews verringern und gleichzeitig keine zusätzlichen Reviews erlauben** aktiviert haben, sollten Sie deshalb folgendes beachten, um den Verlauf der Bewertung zu optimieren:
922 +Wenn Sie die Grundeinstellung** Mindestzahl an Reviews verringern und gleichzeitig keine zusätzlichen Reviews erlauben** aktiviert haben, sollten Sie deshalb folgendes beachten, um den Verlauf der Bewertung zu optimieren:
856 856  
857 857  {{expand title="Beachten Sie für einen optimalen Verlauf ..."}}
858 858  * **Vergeben Sie feste, sich nicht überschneidende Datumsbeschränkungen:** Die Lösungsabgabe sollte immer zeitlich eingeschränkt vor der Reviewphase liegen (Zugang>Abgabeordner>Datumsbeschränkt bis). Damit ist die zum Start der Reviewphase zur Verfügung stehende Anzahl an Lösungsdateien fix und ändert sich nicht nachträglich während der Reviewphase.
... ... @@ -865,7 +865,7 @@
865 865  (% class="auto-cursor-target" %)
866 866   Einzig **der letzte Reviewende kann unter Umständen selbst kein Review von einem Peer für seine Lösung erhalten** und im Gegenzug kann höchstens ein anderer Nutzer zwei Reviews bekommen. Es ist jedoch auch mit dieser Konfiguration ausgeschlossen, dass mehr als ein Nutzer mehr als zwei Reviews erhält. Zusätzlich sinkt die Wahrscheinlichkeit des Auftretens dieses Falles mit steigender Nutzeranzahl.
867 867  )))
868 -*
935 +*
869 869  
870 870  {{expand title="Exkurs zur ungeraden Reviewanzahl ..."}}
871 871  Das Problem entsteht durch das "nacheinander Ziehen" der Reviews. Dies wurde gewählt, um in allen anderen Szenarien vor allem die Gleichverteilung bei mehreren Reviews zu ermöglichen und dabei bestmögliche Anonymität und Zufallsverteilung (auch bei später eingereichten Lösungen ) herzustellen.
... ... @@ -878,4 +878,882 @@
878 878  
879 879  * Wenn der beschriebene Ausnahmefall eintritt, müssen Sie für diesen Nutzer ein [[Expertenreview >>url:http://www.bps-system.de#Expertenreview||shape="rect"]]erstellen. Sie können das Auftreten dieses Falles weiter minimieren, indem Sie die zusätzliche Reviewvergabe erlauben.
880 880  {{/expand}}
948 +{{/layout-cell}}
949 +{{/layout-section}}
950 +{{/layout}}
881 881  
952 +
953 +
954 +{{layout}}
955 +{{layout-section ac:type="two_right_sidebar"}}
956 +{{layout-cell}}
957 +A **peer review** allows an anonymous review of submitted tasks by peer participants. From these participant reviews, an overall assessment of each submitted task may be generated.
958 +
959 +Depending on the configuration, the peer review may include the following steps:
960 +
961 +* **Step 1: Review of other task solutions**
962 +* **Step 2: Provision of feedback on existing reviews of your own task solutions**
963 +* **Step 3: Display of the overall assessment obtained**
964 +
965 +Find out more below about the
966 +
967 +* **[[configuration from an author's point of view>>doc:||anchor="authors"]] **to start configuring these steps.
968 +* **[[usage from a learner's point of view>>doc:||anchor="information"]] **to learn more about how the review process works from a user’s perspective and what actions are expected of participants in this process.
969 +
970 +\\
971 +
972 +
973 +
974 +{{id name="information"/}}
975 +{{/layout-cell}}
976 +
977 +{{layout-cell}}
978 +{{scroll-ignore scroll-pdf="true" scroll-office="true" scroll-chm="true" scroll-docbook="true" scroll-eclipsehelp="true" scroll-epub="true" scroll-html="true"}}
979 +{{panel title="Content"}}
980 +
981 +
982 +{{toc minLevel="2"/}}
983 +{{/panel}}
984 +{{/scroll-ignore}}
985 +{{/layout-cell}}
986 +{{/layout-section}}
987 +
988 +{{layout-section ac:type="single"}}
989 +{{layout-cell}}
990 +(% style="margin-left: 0.0cm;" %)
991 +== (% style="color: rgb(63,68,68);" %)Usage: Learners' View(%%) ==
992 +
993 +\\
994 +
995 +(% class="wrapped" %)
996 +|(((
997 +If the course author has enabled an assessment for a task course element in the form of a peer review procedure, the section **Information for the procedure of the peer review **will appear in the task element.
998 +)))|(((
999 +(% class="content-wrapper" %)
1000 +(((
1001 +[[image:attach:Kursrun - Aufgabe mit PeerReview_en.png]]
1002 +)))
1003 +)))
1004 +|(((
1005 +Open this section to find out more about the individual peer review steps and what other settings have been configured.
1006 +)))|(((
1007 +(% class="content-wrapper" %)
1008 +(((
1009 +[[image:attach:Kursrun - Ablauf PeerReview_en.png]]
1010 +)))
1011 +)))
1012 +|(((
1013 +(% class="content-wrapper" %)
1014 +(((
1015 +The review process usually begins after submitting your own solution. Therefore, start by uploading or creating your own response to a question in the **Submit solution** area.
1016 +
1017 +{{info}}
1018 +If an anonymous review is desired, please make sure that the file titles and properties as well as the file content do not allow any direct conclusions about the creator.
1019 +{{/info}}
1020 +)))
1021 +)))|(((
1022 +(% class="content-wrapper" %)
1023 +(((
1024 +[[image:attach:Kursrun - Lösung abgeben_en.png]]
1025 +)))
1026 +)))
1027 +
1028 +=== 1. Review of other task solutions ===
1029 +
1030 +If the review area is accessible, a corresponding request will appear, and you will be able to see the **Submit reviews for other participants** area. To start the review process, click on **Start review**.
1031 +
1032 +[[image:attach:Kursrun - Review vergeben_en.png]]
1033 +
1034 +{{expand title="Start the review process ..."}}
1035 +(% class="wrapped" %)
1036 +|(% colspan="2" %)(% colspan="2" %)
1037 +(((
1038 +(% class="content-wrapper" %)
1039 +(((
1040 +Clicking on the **Start review** button will open the review form. Fill in the form to review the task solution of another user according to the review specifications of your supervisor. The form contains the following information:
1041 +
1042 +(% class="wrapped" %)
1043 +|(% class="numberingColumn" %)(% class="numberingColumn" %)
1044 +(((
1045 +1
1046 +)))|(((
1047 +An indication of **how many reviews** you need to submit.
1048 +)))|(% rowspan="5" %)(% rowspan="5" %)
1049 +(((
1050 +(% class="content-wrapper" %)
1051 +(((
1052 +[[image:attach:Kursrun - Reviewformular füllen_en.png]]
1053 +)))
1054 +)))
1055 +|(% class="numberingColumn" %)(% class="numberingColumn" %)
1056 +(((
1057 +2
1058 +)))|(((
1059 +The just opened review.
1060 +)))
1061 +|(% class="numberingColumn" %)(% class="numberingColumn" %)
1062 +(((
1063 +3
1064 +)))|(((
1065 +The file you should review. Access the file by clicking on the **file name**.
1066 +)))
1067 +|(% class="numberingColumn" colspan="1" %)(% class="numberingColumn" colspan="1" %)
1068 +(((
1069 +4
1070 +)))|(% colspan="1" %)(% colspan="1" %)
1071 +(((
1072 +Fill in the fields configured by the course author and award points if required.
1073 +)))
1074 +|(% class="numberingColumn" colspan="1" %)(% class="numberingColumn" colspan="1" %)
1075 +(((
1076 +5
1077 +)))|(% colspan="1" %)(% colspan="1" %)
1078 +(((
1079 +Save your review and carry out further reviews if necessary (**Submit and next **button). Once all currently available reviews have been completed, close the dialogue (**Submit and close** button). Alternatively, you can pause the review editing process with **Suspend**.
1080 +)))
1081 +
1082 +{{note title="Please note!"}}
1083 +(% style="letter-spacing: 0.0px;" %)Users will not be able to see the name of the creator, solution, or reviewer. These will remain completely anonymous and will not be visible to users.
1084 +
1085 +**Attention**: The platform cannot affect properties or content in files or form fields. For example, if usernames are stored or hinted at in the file title, file properties, file content or form fields, they will be displayed accordingly.
1086 +{{/note}}
1087 +)))
1088 +)))
1089 +|(((
1090 +The course creator may allow the assignment of additional reviews. In this case, more than one solution will be available to you for review.
1091 +)))|(((
1092 +(% class="content-wrapper" %)
1093 +(((
1094 +[[image:attach:Kursrun - Reviewdialog Mindestanzahl_en.png]]
1095 +)))
1096 +)))
1097 +|(((
1098 +Once a review has been submitted, it can no longer be edited (at this point). However, being the review creator, you can view your submitted reviews at any time by clicking on the **Show review** button.
1099 +
1100 +The creator of the reviewed solution can access the review from the optional feedback session or the assessment area. A course owner has access to all assessment data in the assessment tool.
1101 +)))|(((
1102 +(% class="content-wrapper" %)
1103 +(((
1104 +[[image:attach:Kursrun - vergebene Review einsehen_en.png]]
1105 +)))
1106 +)))
1107 +|(((
1108 +The next steps in the review process can be obtained from the information section.
1109 +)))|(((
1110 +(% class="content-wrapper" %)
1111 +(((
1112 +[[image:attach:Kursrun - Ablauf PeerReview2_en.png]]
1113 +)))
1114 +)))
1115 +{{/expand}}
1116 +
1117 +=== 2. Provision of feedback on existing reviews of your own task solutions ===
1118 +
1119 +The course creator can allow you to comment on reviews that you have received for your own task solutions. In this case, you will be able to see the **Submit feedback for received reviews** area. To run this function, click on the **Submit feedback** button.
1120 +
1121 +[[image:attach:Kursrun - Feedback vergeben_en.png]]
1122 +
1123 +{{expand title="Start feedback process ..."}}
1124 +The feedback form opens. Fill in the form to assess the review received according to the specifications of your supervisor. The form contains the following information:
1125 +
1126 +(% class="wrapped" %)
1127 +|(% class="numberingColumn" %)(% class="numberingColumn" %)
1128 +(((
1129 +1
1130 +)))|(((
1131 +An indication of **how much feedback** you need to give.
1132 +)))|(% rowspan="6" %)(% rowspan="6" %)
1133 +(((
1134 +(% class="content-wrapper" %)
1135 +(((
1136 +[[image:attach:Kursrun - Feedback Formular_en.png]]
1137 +\\\\\\
1138 +)))
1139 +)))
1140 +|(% class="numberingColumn" %)(% class="numberingColumn" %)
1141 +(((
1142 +2
1143 +)))|(((
1144 +The just opened feedback.
1145 +)))
1146 +|(% class="numberingColumn" %)(% class="numberingColumn" %)
1147 +(((
1148 +3
1149 +)))|(((
1150 +The review you received and on which you should leave a comment now.
1151 +)))
1152 +|(% class="numberingColumn" %)(% class="numberingColumn" %)
1153 +(((
1154 +4
1155 +)))|(((
1156 +(% title="" %)
1157 +If you think that the review you received might be inappropriate, you can use the **Report inappropriate review** option. Clicking on the button will open another window where you can describe the points of criticism aimed at the review, depending on the course author's configuration. After the supervisor has been informed, they will check the review and either refuse or accept it.
1158 +)))
1159 +|(% class="numberingColumn" %)(% class="numberingColumn" %)
1160 +(((
1161 +5
1162 +)))|(((
1163 +Fill in the **text fields** configured by the course author with your feedback and award **points** for the received review if required.
1164 +)))
1165 +|(% class="numberingColumn" colspan="1" %)(% class="numberingColumn" colspan="1" %)
1166 +(((
1167 +6
1168 +)))|(% colspan="1" %)(% colspan="1" %)
1169 +(((
1170 +Save your feedback and give more feedback if necessary (**Submit and continue** button). Once all currently available feedback requests have been completed, close the dialogue (**Finish **button).
1171 +)))
1172 +
1173 +If the course author has not enabled a feedback round, you will see any reviews you might have received only with the activation of the overall results.
1174 +
1175 +{{tip title="View feedback for created reviews"}}
1176 +The feedback you have received on your submitted reviews can be found in the review section (submit reviews for other participants) by clicking on the **Show review** button. You will see an overview of all the reviews you have given there. If the entry **Show feedback for this review** is available for a review, you can view the feedback you have received by clicking on this entry.
1177 +{{/tip}}
1178 +{{/expand}}
1179 +
1180 +=== 3. Display of the overall assessment obtained ===
1181 +
1182 +The course creator has a great deal of freedom in calculating and displaying the overall assessment. You can check the time frames and the selected configuration at any time in the [[Information on the peer review process>>doc:||anchor="information"]] section.
1183 +
1184 +If the assessment is already available, it will be displayed in the upper section of the page. With the **Show evaluation **button, you can open a detailed overview of the assessment.
1185 +
1186 +[[image:attach:Kursrun - Auswertung anzeigen_en.png]]
1187 +
1188 +{{expand title="View assessment ..."}}
1189 +(% class="wrapped" %)
1190 +|(((
1191 +Clicking on the **Show evaluation **button will open a dialogue box where the assessment for all received reviews and any given feedback is displayed in a tabular overview.
1192 +
1193 +Below the table is the **Show reviews** button. Click this button to open the detailed view.
1194 +)))|(((
1195 +(% class="content-wrapper" %)
1196 +(((
1197 +[[image:attach:Kursrun - Auswertung öffnen_en.png]]
1198 +)))
1199 +)))
1200 +|(((
1201 +The detailed view shows all received reviews and offers the possibility to report **inappropriate reviews **(even if the course author has not enabled a feedback round).
1202 +)))|(((
1203 +(% class="content-wrapper" %)
1204 +(((
1205 +[[image:attach:Kursrun - Auswertung Detailansicht_en.png]]
1206 +)))
1207 +)))
1208 +|(((
1209 +(% class="content-wrapper" %)
1210 +(((
1211 +The following entries are possible in the Status column:
1212 +
1213 +(% class="wrapped" %)
1214 +|(((
1215 +(% class="content-wrapper" %)
1216 +(((
1217 +[[image:attach:Icon_Expertenreview_en.png]]
1218 +)))
1219 +)))|(((
1220 +This review was written by a course owner. Expert reviews cannot be reported as inappropriate.
1221 +)))
1222 +|(((
1223 +(% class="content-wrapper" %)
1224 +(((
1225 +[[image:attach:Icon_Prüfung ausstehend_en.png]]
1226 +)))
1227 +)))|(((
1228 +The review process is actively accompanied by a course owner. They moderate the final scoring and have not yet checked on this review or completed the overall assessment.
1229 +)))
1230 +|(((
1231 +(% class="content-wrapper" %)
1232 +(((
1233 +[[image:attach:Icon_akzeptiert_en.png]]
1234 +)))
1235 +)))|(((
1236 +The review process is actively accompanied by a course owner. They moderate the final scoring and have confirmed this review as part of the assessment. Therefore, it will also be considered in the overall assessment.
1237 +)))
1238 +|(((
1239 +(% class="content-wrapper" %)
1240 +(((
1241 +[[image:attach:Icon_abgelehnt_en.png]]
1242 +)))
1243 +)))|(((
1244 +The review process is actively accompanied by a course owner. They moderate the final scoring and have refused this review as part of the assessment. Therefore, it will not be included in the overall assessment.
1245 +)))
1246 +|(% colspan="1" %)(% colspan="1" %)
1247 +(((
1248 +(% class="content-wrapper" %)
1249 +(((
1250 +[[image:attach:Icon_Gemeldet_en.png]]
1251 +)))
1252 +)))|(% colspan="1" %)(% colspan="1" %)
1253 +(((
1254 +You have reported this review as inappropriate. However, no course owner has taken action yet.
1255 +)))
1256 +|(% colspan="1" %)(% colspan="1" %)
1257 +(((
1258 +(% class="content-wrapper" %)
1259 +(((
1260 +[[image:attach:Icon_wird ignoriert_en.png]]
1261 +)))
1262 +)))|(% colspan="1" %)(% colspan="1" %)
1263 +(((
1264 +You have reported this review as inappropriate. A course owner has accepted your appeal. Therefore, this review will not be included in the overall assessment.
1265 +)))
1266 +|(% colspan="1" %)(% colspan="1" %)
1267 +(((
1268 +(% class="content-wrapper" %)
1269 +(((
1270 +[[image:attach:Icon_wird akzeptiert_en.png]]
1271 +)))
1272 +)))|(% colspan="1" %)(% colspan="1" %)
1273 +(((
1274 +You have reported this review as inappropriate. A course owner has dismissed your appeal. Therefore, this review will be considered in the overall assessment.
1275 +)))
1276 +)))
1277 +)))|(((
1278 +(% class="content-wrapper" %)
1279 +(((
1280 +[[image:attach:Kursrun - Status zu Reviews_en.png]]
1281 +)))
1282 +)))
1283 +{{/expand}}
1284 +{{/layout-cell}}
1285 +{{/layout-section}}
1286 +
1287 +{{layout-section ac:type="single"}}
1288 +{{layout-cell}}
1289 +
1290 +
1291 +{{id name="authors"/}}
1292 +
1293 +== Configuration: Authors' View ==
1294 +
1295 +=== Configuration of the peer review in the course editor ===
1296 +
1297 +In the course element **task**, authors can enable the assessment by peer review. To do this, switch to the **Assessment** tab and select the checkbox **Activate peer review**.
1298 +
1299 +[[image:attach:Editor - PeerReview aktivieren_en.png]]
1300 +
1301 +This will open additional configuration sections including the review steps:
1302 +
1303 +* (% style="letter-spacing: 0.0px;" %)**Step 1: Review**
1304 +* (% style="letter-spacing: 0.0px;" %)**Step 2**(%%) (% style="letter-spacing: 0.0px;" %)**: Feedback (optional)**
1305 +* (% style="letter-spacing: 0.0px;" %)**Step 3: Result display**
1306 +
1307 +(% style="letter-spacing: 0.0px;" %)**[[image:attach:Editor - PeerReview Abschnitte_en.png]]**
1308 +
1309 +After enabling the peer review function for your task, you can customise the settings to suit your needs.
1310 +
1311 +=== Configuration of step 1: Review ===
1312 +
1313 +In the first section, you can define basic conditions for the review assignment.
1314 +
1315 +{{expand title="Configuration in the review section ..."}}
1316 +(% class="wrapped" %)
1317 +|(% class="numberingColumn" %)(% class="numberingColumn" %)
1318 +(((
1319 +1
1320 +)))|(((
1321 +**Time frame for review: **Set a time frame for users to submit reviews. Within this time frame, submitted reviews can still be changed by the creator.
1322 +)))|(% rowspan="4" %)(% rowspan="4" %)
1323 +(((
1324 +(% class="content-wrapper" %)
1325 +(((
1326 +[[image:attach:Editor - Peer Review Reviewvergabe konfigurieren_en.png]]
1327 +\\\\\\\\
1328 +
1329 +\\
1330 +)))
1331 +)))
1332 +|(% class="numberingColumn" %)(% class="numberingColumn" %)
1333 +(((
1334 +2
1335 +)))|(((
1336 +(% class="content-wrapper" %)
1337 +(((
1338 +**Set a required number of reviews** every user has to submit. Optionally, you can also **allow additional reviews**. If you select this checkbox, each user can voluntarily create more reviews than the required minimum number.
1339 +
1340 +{{note title="Number of reviews falls short of the set minimum number"}}
1341 +We recommend a minimum of three reviews. If you fall below this number, please refer to the help section on the [[Impact of falling below the minimum number>>doc:||anchor="minimum number"]].
1342 +{{/note}}
1343 +
1344 +Regardless of the reviews by the participants, authorised users (e. g. course authors) can write their own reviews on participant solutions in the assessment tool. These will be marked as expert reviews. For more information, see the section [[Create expert review>>doc:||anchor="expert review"]].
1345 +)))
1346 +)))
1347 +|(% class="numberingColumn" %)(% class="numberingColumn" %)
1348 +(((
1349 +3
1350 +)))|(((
1351 +**Configure the template review form:**
1352 +
1353 +* Optionally, you can enter **review hints** in the text field.
1354 +* Select the desired **scoring**. You can choose from the options //Overall score //and //Score per text field//.
1355 +* Enter the **maximum** **score** that reviewers may award.
1356 +* Optionally, add more **free text fields**.
1357 +* Select the option //Documents – Reviewers may upload files// if the participants should be able to **add files to the review**.
1358 +)))
1359 +|(% class="numberingColumn" %)(% class="numberingColumn" %)
1360 +(((
1361 +4
1362 +)))|(((
1363 +**Save** your entries.
1364 +)))
1365 +
1366 +{{info title="Note"}}
1367 +To ensure an even distribution of reviews, we recommend specifying specific time frames for the submission of the task, the review phase and the feedback phase. The restriction of the period for submitting the tasks can be set in the Access tab of the **task** course element (access>drop box>depending on date). This prevents the submission of tasks when the review phase has already begun.
1368 +{{/info}}
1369 +{{/expand}}
1370 +
1371 +=== Configuration of step 2: Feedback (optional) ===
1372 +
1373 +Optionally, you can also allow your users to provide feedback on received reviews. Select the checkbox **The participant can give feedback on received reviews** to configure the feedback process.
1374 +
1375 +[[image:attach:Editor - Peer Review Feedbackvergabe aktivieren_en.png]]
1376 +
1377 +{{expand title="Configuration in the feedback section ..."}}
1378 +Activating this option will open further configuration options.
1379 +
1380 +(% class="wrapped" %)
1381 +|(% class="numberingColumn" %)(% class="numberingColumn" %)
1382 +(((
1383 +1
1384 +)))|(((
1385 +**Time frame: **Set a time frame for users to give feedback on reviews of their solution. Within this time frame, submitted feedback can still be changed by the creator.
1386 +)))|(% rowspan="3" %)(% rowspan="3" %)
1387 +(((
1388 +(% class="content-wrapper" %)
1389 +(((
1390 +[[image:attach:Editor- Peer Review Feedbackvergabe konfigurieren_en.png]]
1391 +\\\\
1392 +)))
1393 +)))
1394 +|(% class="numberingColumn" %)(% class="numberingColumn" %)
1395 +(((
1396 +2
1397 +)))|(((
1398 +**Configure the template feedback form:**
1399 +
1400 +* Optionally, you can enter** feedback hints** in the text field.
1401 +* Select the desired **scoring**. You can choose from the options //Overall score //and //Score per text field//. The scoring within feedback serves the qualitative assessment of reviews.
1402 +* Optionally, add more **free text fields**.
1403 +)))
1404 +|(% class="numberingColumn" %)(% class="numberingColumn" %)
1405 +(((
1406 +3
1407 +)))|(((
1408 +**Save** your entries.
1409 +)))
1410 +{{/expand}}
1411 +
1412 +=== Configuration of step 3: Result display ===
1413 +
1414 +Here you can define the settings for displaying the overall results to the participants.
1415 +
1416 +{{expand title="Configuration in the result view section ..."}}
1417 +(% class="wrapped" %)
1418 +|(% class="numberingColumn" %)(% class="numberingColumn" %)
1419 +(((
1420 +1
1421 +)))|(((
1422 +Set a **time frame** for users to view the overall results. If you leave both fields empty, the user will not see their results before the conditions are met.
1423 +)))|(% rowspan="2" %)(% rowspan="2" %)
1424 +(((
1425 +(% class="content-wrapper" %)
1426 +(((
1427 +[[image:attach:Editor - Ergebninsanzeige konfigurieren_en.png]]
1428 +)))
1429 +)))
1430 +|(% class="numberingColumn" %)(% class="numberingColumn" %)
1431 +(((
1432 +2
1433 +)))|(((
1434 +(% class="content-wrapper" %)
1435 +(((
1436 +Define the **conditions** for displaying the results. All defined conditions must always be met for the results to be displayed to the users. (The conditions are linked by ** AND**.)
1437 +
1438 +Choose between:
1439 +
1440 +* Only show results once the **task**
1441 +** has the minimum number of reviews present (i. e. if the user has received the defined minimum number of reviews for their solution)
1442 +** has its performance results approved by the supervisor (i. e. a peer review with active moderation by the supervisor)
1443 +* Only show results once the **participant**
1444 +** has completed the minimum number of reviews
1445 +** has given feedback for all received reviews
1446 +
1447 +{{expand title="Excursion into the review with moderation ..."}}
1448 +{{info title="Review with moderation"}}
1449 +The peer review function can be performed with and without active support by the supervisor.
1450 +
1451 +For a peer review **with moderation**, select the checkbox **Only show results once the task has its performance results approved by the supervisor**. This means that all reviews and feedback must be individually reviewed and approved or refused by the supervisor. There is no automated result analysis, and the results will be available to users only after approval by the supervisor. For more information, see the section [[Peer review with moderation>>doc:||anchor="Peer review with moderation"]].
1452 +
1453 +In any case, participants always have the option to report reviews as inappropriate to the supervisor, who will then be informed to check on these reviews separately. For more information, see the section [[Edit inappropriate review>>doc:||anchor="Edit inappropriate review"]].
1454 +{{/info}}
1455 +{{/expand}}
1456 +)))
1457 +)))
1458 +
1459 +{{note title="Disabled feedback option"}}
1460 +In the assessment tool, **authorised users** (e. g. course owners) can **view all proposed solutions and related reviews as well as feedback at any time**.
1461 +
1462 +In contrast, **course users** can – with a disabled feedback option – see the reviews they received for their solution **only in the** **specified time frame for the overall result display**. (This also goes for reporting an inappropriate review.)
1463 +{{/note}}
1464 +{{/expand}}
1465 +{{/layout-cell}}
1466 +{{/layout-section}}
1467 +
1468 +{{layout-section ac:type="single"}}
1469 +{{layout-cell}}
1470 +\\
1471 +{{/layout-cell}}
1472 +{{/layout-section}}
1473 +
1474 +{{layout-section ac:type="single"}}
1475 +{{layout-cell}}
1476 +== Overall results to the review process ==
1477 +
1478 +By using the **assessment tool**, authors may always access an overview of which user has (been assigned which task), delivered a solution, submitted a review or provided feedback.
1479 +
1480 +[[image:attach:Bewertungswerkzeug - Übersicht zum Peer Review_en.png]]
1481 +
1482 +In this table, you can also view the reviews (and their statuses) given by the displayed users, or switch to the assessment view as per user.
1483 +
1484 +{{info}}
1485 +However, the assignment of usernames to solutions, reviews or feedback is only visible to authors in the assessment tool, but not to the participants in the course view, or in the dialogues for providing reviews or feedback.
1486 +{{/info}}
1487 +
1488 +=== Open overview in the assessment tool ===
1489 +
1490 +To open the status of the review process in the assessment tool, proceed as follows:
1491 +
1492 +{{expand title="Open overview in the assessment tool ..."}}
1493 +(% class="wrapped" %)
1494 +|(((
1495 +Go to the **assessment tool** of the desired course.
1496 +)))|(((
1497 +(% class="content-wrapper" %)
1498 +(((
1499 +[[image:attach:LMS.Benutzerhandbuch OPAL.Teaching.Bewertung.Peer Review.Bewertungswerkzeug.WebHome@Kursrun - Bewertungswerkzeug öffnen_en.png]]
1500 +)))
1501 +)))
1502 +|(((
1503 +In the left menu, click on the entry **As per course structure**.
1504 +)))|(((
1505 +(% class="content-wrapper" %)
1506 +(((
1507 +[[image:attach:Bewertungswerkzeug - Nach Kursstruktur_en.png]]
1508 +)))
1509 +)))
1510 +|(((
1511 +Select the desired task course element and, if necessary, a course group.
1512 +)))|(((
1513 +(% class="content-wrapper" %)
1514 +(((
1515 +[[image:attach:Bewertungswerkzeug - Gruppenauswahl_en.png]]
1516 +)))
1517 +)))
1518 +|(((
1519 +The displayed table includes information on the reviews carried out by other participants. In addition to the names of the users who created the review, the total score and indications on the review status can be inferred. Using the links, you can display all review content together with the corresponding feedback, if any.
1520 +)))|(((
1521 +(% class="content-wrapper" %)
1522 +(((
1523 +[[image:attach:Bewertungswerkzeug - Übersicht zum Peer Review_en.png]]
1524 +)))
1525 +)))
1526 +{{/expand}}
1527 +
1528 +The opened table contains **information about the status of the review process of all users** in the selected group.
1529 +
1530 +{{expand title="Information in the detailed view ..."}}
1531 +(% class="wrapped" %)
1532 +|(% class="numberingColumn" %)(% class="numberingColumn" %)
1533 +(((
1534 +1
1535 +)))|(((
1536 +Name of the user with a link to the detailed assessment
1537 +)))|(((
1538 +Click on a displayed username. This will open the course element’s detailed assessment view for the selected user.
1539 +)))|(% rowspan="5" %)(% rowspan="5" %)
1540 +(((
1541 +(% class="content-wrapper" %)
1542 +(((
1543 +[[image:attach:Bewertungswerkzeug - Informationen der Tabelle_en.png]]
1544 +\\\\
1545 +)))
1546 +)))
1547 +|(% class="numberingColumn" %)(% class="numberingColumn" %)
1548 +(((
1549 +2
1550 +)))|(((
1551 +Given reviews
1552 +)))|(((
1553 +The link on the entry opens a dialogue with the reviews submitted by the user.
1554 +)))
1555 +|(% class="numberingColumn" %)(% class="numberingColumn" %)
1556 +(((
1557 +3
1558 +)))|(((
1559 +(% class="content-wrapper" %)
1560 +(((
1561 +[[image:attach:Icon_Warnung.png]]Reported reviews
1562 +)))
1563 +)))|(((
1564 +(% class="content-wrapper" %)
1565 +(((
1566 +The icon[[image:attach:Icon_Warnung.png]]indicates that at least one review of this user has been reported as inappropriate. Details will be displayed when clicking on the link.
1567 +)))
1568 +)))
1569 +|(% class="numberingColumn" %)(% class="numberingColumn" %)
1570 +(((
1571 +4
1572 +)))|(((
1573 +(% class="content-wrapper" %)
1574 +(((
1575 +[[image:attach:Icon_Reviewanzahl reicht nicht aus_de.png]]Insufficient number of reviews
1576 +)))
1577 +)))|(((
1578 +The number of reviews received so far for this user is below the configured minimum number of reviews. If the period for the submission of reviews has already expired and the minimum number has not been reached, you should check the assessment of the affected user, write an expert review if necessary and adjust the assessment form.
1579 +)))
1580 +|(% class="numberingColumn" %)(% class="numberingColumn" %)
1581 +(((
1582 +5
1583 +)))|(((
1584 +(% class="content-wrapper" %)
1585 +(((
1586 +[[image:attach:Icon_Tabelle anpassen_en.png]]
1587 +)))
1588 +)))|(((
1589 +If not all required columns are displayed, you can change the column configuration by clicking on this icon.
1590 +)))
1591 +{{/expand}}
1592 +
1593 +If you instead open the **detailed assessment view** **of a user**, you will receive information about the **review process** of **that user's solution**.
1594 +
1595 +{{expand title="Information in the detailed view ..."}}
1596 +(% class="wrapped" %)
1597 +|(% class="numberingColumn" %)(% class="numberingColumn" %)
1598 +(((
1599 +1
1600 +)))|(((
1601 +Selected course element
1602 +)))|(% rowspan="3" %)(% rowspan="3" %)
1603 +(((
1604 +(% class="content-wrapper" %)
1605 +(((
1606 +[[image:attach:Bewertungswerkzeug - Detailansicht1_en.png]]
1607 +)))
1608 +)))
1609 +|(% class="numberingColumn" %)(% class="numberingColumn" %)
1610 +(((
1611 +2
1612 +)))|(((
1613 +Selected user
1614 +)))
1615 +|(% class="numberingColumn" %)(% class="numberingColumn" %)
1616 +(((
1617 +3
1618 +)))|(((
1619 +Task and solution of the user
1620 +)))
1621 +|(% class="numberingColumn" %)(% class="numberingColumn" %)
1622 +(((
1623 +4
1624 +)))|(((
1625 +Reviews received and status of the reviews
1626 +)))|(% rowspan="4" %)(% rowspan="4" %)
1627 +(((
1628 +(% class="content-wrapper" %)
1629 +(((
1630 +[[image:attach:Bewertungswerkzeug - Detailansicht2_en.png]]
1631 +)))
1632 +)))
1633 +|(% class="numberingColumn" colspan="1" %)(% class="numberingColumn" colspan="1" %)
1634 +(((
1635 +5
1636 +)))|(% colspan="1" %)(% colspan="1" %)
1637 +(((
1638 +Possibility to give an expert review
1639 +)))
1640 +|(% class="numberingColumn" colspan="1" %)(% class="numberingColumn" colspan="1" %)
1641 +(((
1642 +6
1643 +)))|(% colspan="1" %)(% colspan="1" %)
1644 +(((
1645 +Assessment form with overall score
1646 +)))
1647 +|(% class="numberingColumn" colspan="1" %)(% class="numberingColumn" colspan="1" %)
1648 +(((
1649 +7
1650 +)))|(% colspan="1" %)(% colspan="1" %)
1651 +(((
1652 +Show log file
1653 +)))
1654 +{{/expand}}
1655 +
1656 +(% class="auto-cursor-target" %)
1657 +
1658 +
1659 +
1660 +{{id name="inappropriate"/}}
1661 +
1662 +=== Edit inappropriate review ===
1663 +
1664 +A user has reported a review that they considered to be inappropriate. Now you have to check and accept or refuse this reported review. Depending on your choice, the review will then be included in the overall result or discarded.
1665 +
1666 +{{expand title="How to deal with reported reviews ..."}}
1667 +(% class="wrapped" %)
1668 +|(((
1669 +(% class="content-wrapper" %)
1670 +(((
1671 +[[image:attach:Icon_Gemeldet_en.png]]
1672 +)))
1673 +)))|(((
1674 +(% class="content-wrapper" %)
1675 +(((
1676 +If the user has reported a review as inappropriate, the entry “Reported” will appear in the Review status column. Now open the detailed view of the corresponding review. In the dialogue that opens, you can make a decision about the review. Choose between** [[image:attach:Icon_Review ignorieren_en.png]]**and [[image:attach:Icon_Review akzeptieren_en.png]].
1677 +)))
1678 +)))
1679 +|(((
1680 +(% class="content-wrapper" %)
1681 +(((
1682 +[[image:attach:Icon_wird ignoriert_en.png]]
1683 +)))
1684 +)))|(((
1685 +By clicking on the **Ignore review** button, you agree to the user's objection, and the review that has been reported as inappropriate will not be included in the calculation of the overall score. The review status then changes from "Reported" to **Reported (will be ignored)**. Discarding a review may lead to the number of the user’s reviews falling below the predetermined minimum number. Therefore, please check the entire assessment and adjust it if necessary, using the assessment form or by performing an expert review.
1686 +)))
1687 +|(((
1688 +(% class="content-wrapper" %)
1689 +(((
1690 +[[image:attach:Icon_wird akzeptiert_en.png]]
1691 +)))
1692 +)))|(((
1693 +By clicking on the **Accept review** button, you dismiss the user's objection, and the reported review will still be considered in the calculation of the overall score. The review status then changes from “Reported” to **Reported (will be accepted)**.
1694 +)))
1695 +|(((
1696 +(% class="content-wrapper" %)
1697 +(((
1698 +[[image:attach:Icon_Expertenreview_en.png]]
1699 +)))
1700 +)))|(((
1701 +An [[expert review>>doc:||anchor="expert review"]] has been performed and will be considered in the overall assessment.
1702 +)))
1703 +{{/expand}}
1704 +
1705 +(% class="auto-cursor-target" %)
1706 +
1707 +
1708 +
1709 +{{id name="moderation"/}}
1710 +
1711 +=== Peer review with moderation ===
1712 +
1713 +If you wish to accompany the review process as a course supervisor and check on the assessments before they are released to the users, you can do so by enabling the option **Only show results once the task has its performance results approved by the supervisor**. Configure this option in the course editor in the result view section.
1714 +
1715 +If the moderation function is enabled, this means that you will need to look into each review individually and accept or refuse it. Only when you are finished, the assessment can be adopted.
1716 +
1717 +{{expand title="Moderate assessment process ..."}}
1718 +(% class="wrapped" %)
1719 +|=(((
1720 +Review status
1721 +)))|=(((
1722 +Explanation
1723 +)))
1724 +|(((
1725 +(% class="content-wrapper" %)
1726 +(((
1727 +[[image:attach:Icon_Prüfung ausstehend_en.png]]
1728 +)))
1729 +)))|(((
1730 +(% class="content-wrapper" %)
1731 +(((
1732 +If a moderated peer review has not yet been checked, the entry **Inspection pending** will appear in the Review status column. Open the detailed view of the review by clicking on the entry “Display review” and pass your judgement by clicking on the [[image:attach:Icon_Review akzeptieren_en.png]] or [[image:attach:Icon_Review ablehnen_en.png]] button.
1733 +)))
1734 +)))
1735 +|(((
1736 +(% class="content-wrapper" %)
1737 +(((
1738 +[[image:attach:Icon_akzeptiert_en.png]]
1739 +)))
1740 +)))|(((
1741 +Using the “Accept review" button, you will approve of the review, and it will be included in the overall assessment. The review status then changes from “Inspection pending” to **Accepted**.
1742 +)))
1743 +|(((
1744 +(% class="content-wrapper" %)
1745 +(((
1746 +[[image:attach:Icon_abgelehnt_en.png]]
1747 +)))
1748 +)))|(((
1749 +Using the “Refuse review” button, you will dismiss the review, and it will not be included in the calculation of the overall assessment. The review status then changes from “Inspection pending” to **Refused**.
1750 +
1751 +Discarding a review may lead to the number of received reviews falling below the predetermined minimum number. Therefore, please check the entire assessment and adjust it if necessary, using the assessment form or by performing an [[expert review>>doc:||anchor="expert review"]].
1752 +)))
1753 +|(% colspan="1" %)(% colspan="1" %)
1754 +(((
1755 +(% class="content-wrapper" %)
1756 +(((
1757 +[[image:attach:Icon_Bewertung übernehmen_en.png]]
1758 +)))
1759 +)))|(% colspan="1" %)(% colspan="1" %)
1760 +(((
1761 +The **Apply review** button does not become active until all existing reviews have been viewed and accepted or refused. Clicking on the button stores and transmits the average total score of all individual reviews to the total score field of the assessment form. Depending on the configuration, this will lead to passing the course element.
1762 +)))
1763 +{{/expand}}
1764 +
1765 +(% class="auto-cursor-target" %)
1766 +[[image:attach:Bewertungswerkzeug - Moderation_en.png]]
1767 +
1768 +(% class="auto-cursor-target" %)
1769 +
1770 +
1771 +
1772 +{{id name="expert review"/}}
1773 +
1774 +=== Create expert review ===
1775 +
1776 +Course supervisors may create a review for a participant’s solution in the assessment tool at any time. Depending on the configuration, this may even be necessary if a participant has received too few reviews for an assessment, other participants have not given enough reviews, or there have been inappropriate reviews.
1777 +
1778 +{{expand title="Give expert review ..."}}
1779 +(% class="wrapped" %)
1780 +|(((
1781 +Switch to the detailed view of a user's assessment in the assessment tool.
1782 +)))|(% rowspan="3" %)(% rowspan="3" %)
1783 +(((
1784 +(% class="content-wrapper" %)
1785 +(((
1786 +[[image:attach:Bewertungswerkzeug - Expertenreview starten_en.png]]
1787 +)))
1788 +)))
1789 +|(((
1790 +In the **Peer reviews received** section, you will find the **Give expert review** button right underneath the table.
1791 +)))
1792 +|(((
1793 +Clicking on the button will open the review form, where you can now give a review for the participant. For the expert review, you will be provided with the same form as the participants for the regular review.
1794 +
1795 +Submit the review with **Save and close**. Your review will then receive the status or addition **expert review** in the summary table and all user views.
1796 +)))
1797 +{{/expand}}
1798 +
1799 +(% class="auto-cursor-target" %)
1800 +
1801 +
1802 +
1803 +{{id name="minimum number"/}}
1804 +
1805 +=== Impact of falling below the minimum number ===
1806 +
1807 +The educational goal of the assessment form “peer review” is to enable a [[peer assessment>>url:https://de.wikipedia.org/wiki/Peer_Assessment||shape="rect"]]. Therefore, in drafting this form of assessment, care has been taken to ensure a great many basic scenarios. In particular, the anonymity and randomness of the allocation of participants’ solutions for assessment have been determined as a target criterion.
1808 +
1809 +If you have **configured a** **low required number of reviews and disabled additional reviews **in the basic settings, you should consider the following to optimise the assessment procedure:
1810 +
1811 +{{expand title="Important information for an optimal assessment procedure ..."}}
1812 +* **Configure fixed, non-overlapping date restrictions:** The submission of solutions should always be limited in time to make sure it takes place prior to the review phase (access>drop box>restricted by date until). Therefore, the number of solution files available at the start of the review phase will be fixed and will not change during the review phase.
1813 +* With the start of the review phase, all available reviews will be randomly distributed among all users clicking on the “Start review” button. This means that the assignment of a review only takes place when the user selects the button and is not previously determined. In other scenarios, this guarantees a very open peer review process, which also optimally integrates subsequently submitted solutions.
1814 +* Reducing the minimum number to 1 will result in each user receiving a review of their solution after all of the reviews have been completed.
1815 +* [[image:attach:Icon_Warnung.png]]Only **the last reviewer might not receive a peer review of their solution**; in return, at most, one other user will receive two reviews. However, even with this configuration, it is almost impossible for more than one user to receive more than two reviews and becomes even less likely with an increasing number of users.
1816 +*
1817 +* {{expand title="Excursion into odd review numbers ..."}}The problem arises from "successively drawn" reviews. This approach was chosen to guarantee above all an equal distribution when there are multiple reviews, enabling the best possible anonymity and random distribution (even for subsequently submitted solutions).
1818 +
1819 +However, if there are only three users (A, B, C) left, the following assignment may occur: (A:B means user A picks user B's solution for review and performs the review)
1820 +A:B; B:C; C:A => All users have received and performed a review.
1821 +A:C; B:A; C:B => All users have received and performed a review.
1822 +A:B; B:A; C:? => In this case, C will randomly receive and review the solution of either A or B. Therefore, user A or B will receive two reviews and the previously mentioned expert review will become necessary for user C’s solution. However, if the option "Allow additional reviews" is enabled, the next respective review will be assigned to a user who has already given a review. Thus C will also receive a peer review.{{/expand}}If the exception described above occurs, you need to perform an [[expert review>>doc:||anchor="expert review"]]for this user. To further minimise the chances for such a case, you may allow the assignment of additional reviews.
1823 +{{/expand}}
1824 +{{/layout-cell}}
1825 +{{/layout-section}}
1826 +{{/layout}}