Zum Inhalt springen

Wiki-Quellcode von Peer Review

Version 354.1 von Carina Enke am 10.12.2019
Zeige letzte Bearbeiter
1 {{sv-translation language="de"}}
2 {{layout}}
3 {{layout-section ac:type="single"}}
4 {{layout-cell}}
5 \\
6
7 {{details}}(% class="wrapped" %)
8 |=(((
9 Verantwortlicher
10 )))|(((
11 \\
12 )))
13 |=(% colspan="1" %)(% colspan="1" %)
14 (((
15 Status
16 )))|(% class="highlight-yellow" colspan="1" data-highlight-colour="yellow" %)(% class="highlight-yellow" colspan="1" data-highlight-colour="yellow" %)
17 (((
18 (% class="content-wrapper" %)
19 (((
20
21
22 {{sv-metadata type="workflow-status"/}}
23
24 {{status colour="Green" title="Fertig"/}}
25 )))
26 )))
27 |=(% colspan="1" %)(% colspan="1" %)
28 (((
29 Varianten
30 )))|(% colspan="1" %)(% colspan="1" %)
31 (((
32 (% class="content-wrapper" %)
33 (((
34 {{sv-metadata type="variants"/}}
35 )))
36 )))
37 |=(% colspan="1" %)(% colspan="1" %)
38 (((
39 Attribute
40 )))|(% colspan="1" %)(% colspan="1" %)
41 (((
42 (% class="content-wrapper" %)
43 (((
44 {{sv-metadata type="attributes"/}}
45 )))
46 )))
47 |=(% colspan="1" %)(% colspan="1" %)
48 (((
49 Pagekey
50 )))|(% colspan="1" %)(% colspan="1" %)
51 (((
52 (% class="content-wrapper" %)
53 (((
54 {{sv-metadata type="pagekey"/}}
55 )))
56 )))
57 |=(% colspan="1" %)(% colspan="1" %)
58 (((
59 Übersetzung
60 )))|(% colspan="1" %)(% colspan="1" %)
61 (((
62 (% class="content-wrapper" %)
63 (((
64 (% class="sv-ti-title-text" %)Peer Review(%%) 
65
66 {{status colour="Green" title="fertig"/}}
67
68 \\
69 )))
70 )))
71 |=(% colspan="1" %)(% colspan="1" %)
72 (((
73 TODOs
74 )))|(% colspan="1" %)(% colspan="1" %)
75 (((
76 (% class="content-wrapper" %)
77 (((
78 (% class="task-list" %)
79 (((
80 {{task reference="/Tasks/Task_1" status="Done"}}
81 carina: Umsetzung in neuer GUI und Überarbeitung, Ergänzugn durch [[OLATCE-12267>>url:https://www.bps-system.de/devel/browse/OLATCE-12267||shape="rect"]]
82 {{/task}}
83
84 {{task reference="/Tasks/Task_4" status="Done"}}
85 carina: Bildunterschriften und eng. Bilder
86 {{/task}}
87
88 {{task reference="/Tasks/Task_5" status="Done"}}
89 carina {{mention reference="XWiki.0a49950f5c0f19a8015c101b60e10001" style="FULL_NAME" anchor="XWiki-0a49950f5c0f19a8015c101b60e10001-QPRQi"/}} Kann übersetzt werden
90 {{/task}}
91
92 {{task reference="/Tasks/Task_9" status="Done"}}
93 Vanessa: {{mention reference="XWiki.carina" style="FULL_NAME" anchor="XWiki-carina-cyxEq"/}}: Einige Bilder und Icons fehlen noch auf Englisch.
94 {{/task}}
95
96 {{task reference="/Tasks/Task_11" status="Done"}}
97 carina {{mention reference="XWiki.0a49950f5c0f19a8015c101b60e10001" style="FULL_NAME" anchor="XWiki-0a49950f5c0f19a8015c101b60e10001-SLQPr"/}} : Fehlende ergänzt, bitte abschließender Check der EN-Seite
98 {{/task}}
99 )))
100 )))
101 ))){{/details}}
102 \\
103 {{/layout-cell}}
104 {{/layout-section}}
105
106 {{layout-section ac:type="two_right_sidebar"}}
107 {{layout-cell}}
108 Ein **Peer Review** ermöglicht das anonyme Begutachten von eingereichten Aufgaben durch andere Teilnehmer. Aus diesen Gutachten der Teilnehmer kann eine Gesamtbewertung für die jeweils eingereichte Aufgabe entstehen.
109
110 Je nach Konfiguration kann das Peer Review folgende Abschnitte umfassen:
111
112 * **Schritt 1: Review anderer Aufgabenlösungen durchführen
113 **
114 * **Schritt 2: Feedback zu vorliegenden Reviews eigener Aufgabenlösungen abgeben
115 **
116 * **Schritt 3: Anzeige der erhaltenen Gesamtbewertung**
117
118 Lesen Sie weiter unter
119
120 * **[[Nutzung aus Autoren-Sicht>>doc:||anchor="Autoren"]],** um mit der Konfiguration dieser Abschnitte zu beginnen.
121 * **[[Nutzung aus Lerner-Sicht>>doc:||anchor="Informationen"]] **, um zu erfahren wie der Reviewprozess aus Nutzer-Sicht verläuft und welche Aktionen von Teilnehmern am Reviewprozess erwartet werden.
122
123 \\
124
125
126
127 {{id name="Informationen"/}}
128 {{/layout-cell}}
129
130 {{layout-cell}}
131 {{scroll-ignore}}
132 {{panel title="Inhalt"}}
133
134
135 {{toc/}}
136 {{/panel}}
137 {{/scroll-ignore}}
138 {{/layout-cell}}
139 {{/layout-section}}
140
141 {{layout-section ac:type="single"}}
142 {{layout-cell}}
143 == Nutzung aus Lerner-Sicht ==
144
145 \\
146
147 (% class="wrapped" %)
148 |(((
149 Hat der Kursautor für einen Kursbaustein Aufgabe die Bewertung im Peer Review-Verfahren vorgesehen, erscheint beim Aufgabenbaustein der Abschnitt **Informationen zum Ablauf des Peer Review**.
150 )))|(((
151 (% class="content-wrapper" %)
152 (((
153 [[image:attach:Kursrun - Aufgabe mit PeerReview_de.png]]
154 )))
155 )))
156 |(((
157 Öffnen Sie diesen Bereich, um zu sehen welche Abschnitte für das Peer-Review vorgesehen sind und welche weiteren Einstellungen vorgenommen wurden.
158 )))|(((
159 (% class="content-wrapper" %)
160 (((
161 [[image:attach:Kursrun - Ablauf PeerReview_de.png]]
162 )))
163 )))
164 |(((
165 (% class="content-wrapper" %)
166 (((
167 Das Reviewverfahren beginnt meist nach Abgabe einer eigenen Lösung. Laden oder erstellen Sie deshalb (nach Aufgabenauswahl) zunächst eine eigene Aufgabenantwort im Bereich **Lösung abgeben**.
168
169 {{info}}
170 Soll ein anonymes Review erfolgen, achten Sie bitte darauf, dass Dateititel und Eigenschaften sowie der Datei-Inhalt keine direkten Rückschlüsse auf den Ersteller zulassen.
171 {{/info}}
172 )))
173 )))|(((
174 (% class="content-wrapper" %)
175 (((
176 [[image:attach:Kursrun - Lösung abgeben_de.png]]
177 )))
178 )))
179
180 === 1. Review anderer Aufgabenlösungen durchführen ===
181
182 Ist der Reviewbereich freigegeben, erscheint eine entsprechende Aufforderung. Sie sehen den Bereich **Reviews für andere Teilnehmer abgeben**. Mit Klick auf den Button** Review starten** beginnt die Reviewvergabe.
183
184 [[image:attach:Kursrun - Review vergeben_de.png]]
185
186 {{expand title="Starten Sie den Review-Prozess ..."}}
187 (% class="wrapped" %)
188 |(% colspan="2" %)(% colspan="2" %)
189 (((
190 (% class="content-wrapper" %)
191 (((
192 Mit Klick auf den Button **Review starten** öffnet sich das Reviewformular. Bewerten Sie im Formular die Aufgabenlösung eines anderen Nutzers entsprechend den Reviewvorgaben Ihres Tutors. Das Formular enthält folgende Informationen:
193
194 (% class="wrapped" %)
195 |(% class="numberingColumn" %)(% class="numberingColumn" %)
196 (((
197 1
198 )))|(((
199 Eine Angabe **wieviele Reviews** von Ihnen gefordert werden.
200 )))|(% rowspan="5" %)(% rowspan="5" %)
201 (((
202 (% class="content-wrapper" %)
203 (((
204 [[image:attach:Kursrun - Reviewformular füllen_de.png]]
205 \\
206 )))
207 )))
208 |(% class="numberingColumn" %)(% class="numberingColumn" %)
209 (((
210 2
211 )))|(((
212 Das gerade geöffnete Review.
213 )))
214 |(% class="numberingColumn" %)(% class="numberingColumn" %)
215 (((
216 3
217 )))|(((
218 Die Datei, welche Sie begutachten sollen. Sie können auf die Datei zugreifen, in dem Sie auf den **Namen der Datei **klicken.
219 )))
220 |(% class="numberingColumn" %)(% class="numberingColumn" %)
221 (((
222 4
223 )))|(% colspan="1" %)(% colspan="1" %)
224 (((
225 Füllen Sie die vom Kursautor konfigurierten Felder und vergeben Sie, wenn gefordert, Punkte.
226 )))
227 |(% class="numberingColumn" %)(% class="numberingColumn" %)
228 (((
229 5
230 )))|(% colspan="1" %)(% colspan="1" %)
231 (((
232 Speichern Sie Ihr Review und führen Sie ggf. weitere Reviews durch (Button **Abgeben und Weiter**). Sind alle aktuell verfügbaren Reviews durchgeführt, schließen Sie den Dialog (Button **Abgeben und Schließen**). Alternativ können Sie die Bearbeitung der Reviews mit **Unterbrechen** pausieren.
233 )))
234 )))
235
236 {{note title="Bitte beachten Sie!"}}
237 Als Nutzer haben Sie nicht die Möglichkeit, den Namen des Erstellers, der Lösung oder des Reviewenden zu sehen. Sie bleiben für Nutzer vollständig anonym.
238
239 **Achtung**: Die Plattform kann jedoch keinen Einfluss auf Eigenschaften oder Inhalte in Dateien oder Formularfeldern nehmen. Wenn zum Beispiel im Dateititel, den Datei-Eigenschaften oder in den Inhalten von Dateien oder Formularfeldern Nutzernamen oder Hinweise darauf gespeichert sind, werden diese entsprechend angezeigt.
240 {{/note}}
241 )))
242 |(% colspan="1" %)(% colspan="1" %)
243 (((
244 (% class="content-wrapper" %)
245 (((
246 Der Kursersteller kann die Vergabe zusätzlicher Reviews erlauben. In diesem Fall sehen Sie weitere Lösungen zur Begutachtung.
247 )))
248 )))|(% colspan="1" %)(% colspan="1" %)
249 (((
250 (% class="content-wrapper" %)
251 (((
252 [[image:attach:Kursrun - Reviewdialog Mindestanzahl_de.png]]
253 )))
254 )))
255 |(% colspan="1" %)(% colspan="1" %)
256 (((
257 Von Ihnen abgegebene Reviews sind (zunächst) nicht mehr änderbar. Sie können aber jederzeit per Klick auf den Button **Reviews anzeigen** von Ihnen als Reviewersteller eingesehen werden.
258
259 Der Ersteller der von Ihnen begutachteten Lösung kann das erhaltene Review in der optionalen Feedbackrunde oder im Auswertungsbereich einsehen. Ein Kursverantwortlicher hat im Bewertungswerkzeug Zugriff auf alle Bewertungsdaten.
260 )))|(% colspan="1" %)(% colspan="1" %)
261 (((
262 (% class="content-wrapper" %)
263 (((
264 [[image:attach:Kursrun - vergebene Review einsehen_de.png]]
265 )))
266 )))
267 |(% colspan="1" %)(% colspan="1" %)
268 (((
269 Den weiteren Ablauf des Reviewverfahrens können Sie im Informationsbereich einsehen.
270
271 \\
272 )))|(% colspan="1" %)(% colspan="1" %)
273 (((
274 (% class="content-wrapper" %)
275 (((
276 [[image:attach:Kursrun - Ablauf PeerReview2_de.png]]
277 )))
278 )))
279
280 **
281 **
282 {{/expand}}
283
284 === 2. Feedback zu vorliegenden Reviews eigener Aufgabenlösungen abgeben**
285 ** ===
286
287 Der Kursersteller kann Ihnen die Möglichkeit einräumen, dass Sie sich zu Reviews, welche Sie zur eigenen Aufgabenlösung erhalten haben, äußern. In diesem Fall sehen Sie den Bereich **Feedback für erhaltene Reviews abgegeben**. Starten Sie Funktion mit Klick auf den Button **Feedback vergeben**.
288
289 [[image:attach:Kursrun - Feedback vergeben_de.png]]
290
291 {{expand title="Feedbackprozess starten ..."}}(% class="auto-cursor-target" %)
292 Es öffnet sich das Feedbackforumlar. Bewerten Sie im Formular das erhaltene Review entsprechend den Vorgaben Ihres Tutors. Das Formular enthält folgende Informationen:
293
294 (% class="wrapped" %)
295 |(% class="numberingColumn" %)(% class="numberingColumn" %)
296 (((
297 1
298 )))|(((
299 Eine Angabe **wieviele Feedbacks **von Ihnen gefordert werden.
300
301 \\
302 )))|(% rowspan="6" %)(% rowspan="6" %)
303 (((
304 (% class="content-wrapper" %)
305 (((
306 [[image:attach:Kursrun - Feedback Formular_de.png]]
307 )))
308 )))
309 |(% class="numberingColumn" %)(% class="numberingColumn" %)
310 (((
311 2
312 )))|(% colspan="1" %)(% colspan="1" %)
313 (((
314 Das gerade geöffnete Feedback.
315
316 \\
317 )))
318 |(% class="numberingColumn" %)(% class="numberingColumn" %)
319 (((
320 3
321 )))|(% colspan="1" %)(% colspan="1" %)
322 (((
323 Das erhaltene Review, zu welchem Sie nun Stellung nehmen sollen.
324 )))
325 |(% class="numberingColumn" colspan="1" %)(% class="numberingColumn" colspan="1" %)
326 (((
327 4
328 )))|(% colspan="1" %)(% colspan="1" %)
329 (((
330 Erscheint Ihnen ein erhaltenes Review als unangemessen, können Sie die Option **Unangemessenes Review melden** verwenden. Bei Klick auf den Button öffnet sich ein weiteres Fenster in dem Sie je nach Konfiguration des Kursautors die Kritikpunkte am Review beschreiben können. Nach der Meldung an den Tutor, wird dieser das Review prüfen und es entweder entsprechend ablehnen oder dennoch akzeptieren.
331 )))
332 |(% class="numberingColumn" %)(% class="numberingColumn" %)
333 (((
334 5
335 )))|(% colspan="1" %)(% colspan="1" %)
336 (((
337 Füllen Sie die vom Kursautor konfigurierten **Textfelder** mit Ihrem Feedback und vergeben Sie, wenn gefordert, **Punkte** für das erhaltene Review.
338 )))
339 |(% class="numberingColumn" %)(% class="numberingColumn" %)
340 (((
341 6
342 )))|(% colspan="1" %)(% colspan="1" %)
343 (((
344 Speichern Sie Ihr Feedback und führen Sie ggf. weitere Feedbacks durch (Button **Abgeben und Weiter**). Sind alle aktuell verfügbaren Feedbacks durchgeführt, schließen Sie den Dialog (Button **Abschließen**).
345 )))
346
347 (% class="auto-cursor-target" %)
348 Hat der Kursautor keine Feedbackrunde vorgesehen, werden Sie erhaltene Reviews mit Freischaltung der Gesamtergebnisse sehen.
349
350 {{tip title="Feedback für erstellte Reviews einsehen"}}
351 Feedback, welches Sie auf die von Ihnen vergebenen Reviews erhalten haben, können Sie im Reviewvergabebereich (Reviews für andere Teilnehmer abgeben) mit Klick auf den Button **Reviews anzeigen** einsehen. Sie sehen dort alle von Ihnen vergebenen Reviews. Ist bei einem Review der Eintrag **Feedback zu diesem Review anzeigen** vorhanden, können Sie das erhaltene Feedback mit Klick auf den Eintrag einsehen.
352 {{/tip}}{{/expand}}\\
353
354 === 3. Anzeige der erhaltenen Gesamtbewertung ===
355
356 Für die Berechnung und Anzeige der Gesamtbewertung hat der Kursersteller sehr viele Freiheiten. Den Zeitraum und die gewählte Konfiguration können Sie jederzeit im Abschnitt [[Informationen zum Ablauf des Peer Review>>doc:||anchor="Informationen"]] überprüfen.
357
358 Ist die Bewertung verfügbar, wird sie im oberen Seitenabschnitt angezeigt. Mit dem Button **Auswertung anzeigen** können Sie eine detaillierte Übersicht der erfolgten Bewertung öffnen.
359
360 [[image:attach:Kursrun - Auswertung anzeigen_de.png]]
361
362 {{expand title="Auswertung einsehen ..."}}
363 (% class="wrapped" %)
364 |(((
365 Nach Klick auf den Button **Auswertung anzeigen** öffnet sich ein Dialogfenster, in dem die Bewertung zu allen erhaltenen Reviews und ggf. vergebenen Feedbacks dazu in einer tabellarischen Übersicht angezeigt wird.
366
367 Unter der Tabelle befindet sich der Button** Reviews anzeigen**, mit Klick auf den Button öffnet sich die Detailansicht.
368 )))|(((
369 (% class="content-wrapper" %)
370 (((
371 [[image:attach:Kursrun - Auswertung öffnen_de.png]]
372 )))
373 )))
374 |(((
375 Die Detailansicht zeigt alle erhaltenen Reviews an und bietet die Möglichkeit ein **unangemessenes Review **zu melden (auch dann, wenn der Kursautor keine Feedbackrunde vorgesehen hat).
376 )))|(((
377 (% class="content-wrapper" %)
378 (((
379 [[image:attach:Kursrun - Auswertung Detailansicht_de.png]]
380 )))
381 )))
382 |(% colspan="1" %)(% colspan="1" %)
383 (((
384 (% style="color: rgb(0,0,0);" %)In der Spalte Status sind folgende Einträge möglich:
385
386 (% class="wrapped" %)
387 |(((
388 (% class="content-wrapper" %)
389 (((
390 [[image:attach:Icon_Auswertung Review Expertenreview_de.png]]
391 )))
392 )))|(((
393 Dieses Review wurde von einem Kursverantwortlichen erstellt. Expertenreviews können nicht als unangemessen gemeldet werden.
394 )))
395 |(% colspan="1" %)(% colspan="1" %)
396 (((
397 (% class="content-wrapper" %)
398 (((
399 [[image:attach:Icon_Auswertung Review Prüfung ausstehend_de.png]]
400 )))
401 )))|(% colspan="1" %)(% colspan="1" %)
402 (((
403 Der Reviewprozess wird von einem Kursverantwortlichen aktiv begleitet. Er moderiert die endgültige Punktevergabe und hat diese Review noch nicht geprüft bzw. die Gesamtbewertung noch nicht abgeschlossen.
404 )))
405 |(((
406 (% class="content-wrapper" %)
407 (((
408 [[image:attach:Icon_Auswertung Review Akzeptiert_de.png]]
409 )))
410 )))|(((
411 Der Reviewprozess wird von einem Kursverantwortlichen aktiv begleitet. Er moderiert die endgültige Punktevergabe und hat diese Review als Teil der Bewertung bestätigt. Es ist damit Teil der Gesamtbewertung.
412 )))
413 |(((
414 [[image:attach:Icon_Auswertung Review Abgelehnt_de.png]]
415 )))|(((
416 Der Reviewprozess wird von einem Kursverantwortlichen aktiv begleitet. Er moderiert die endgültige Punktevergabe und hat diese Review als Teil der Bewertung abgelehnt. Es fließt nicht in die Gesamtbewertung ein.
417 )))
418 |(((
419 (% class="content-wrapper" %)
420 (((
421 [[image:attach:Icon_Gemeldet_de.png]]
422 )))
423 )))|(((
424 Sie haben dieses Review als unangemessen gemeldet. Es hat aber noch kein Kursverantwortlicher darauf reagiert.
425 )))
426 |(% colspan="1" %)(% colspan="1" %)
427 (((
428 [[image:attach:Icon_wird ignoriert_de.png]]
429 )))|(% colspan="1" %)(% colspan="1" %)
430 (((
431 Sie haben dieses Review als unangemessen gemeldet. Ein Kursverantwortlicher hat Ihrer Meldung zugestimmt. Dieses Review fließt nicht in die Gesamtbewertung ein.
432 )))
433 |(((
434 [[image:attach:Icon_wird akzeptiert_de.png]]
435 )))|(((
436 Sie haben dieses Review als unangemessen gemeldet. Ein Kursverantwortlicher hat Ihrer Meldung zurückgewiesen. Dieses Review fließt in die Gesamtbewertung ein.
437 )))
438
439 (% style="color: rgb(0,0,0);" %)
440
441 )))|(% colspan="1" %)(% colspan="1" %)
442 (((
443 (% class="content-wrapper" %)
444 (((
445 [[image:attach:Kursrun - Status zu Reviews_de.png]]
446 )))
447 )))
448 {{/expand}}
449 {{/layout-cell}}
450 {{/layout-section}}
451
452 {{layout-section ac:type="single"}}
453 {{layout-cell}}
454
455
456 {{id name="Autoren"/}}
457
458 == Nutzung aus Autoren-Sicht ==
459
460 === Konfiguration des Peer Reviews im Kurseditor
461 ===
462
463 Im Kursbaustein **Aufgabe** können Sie als Autor die Bewertung per Peer Review aktivieren. Markieren Sie dazu im Tab **Bewertung** die Checkbox **Peer Review aktivieren**.
464
465 [[image:attach:Editor - PeerReview aktivieren_de.png]]
466
467 Anschließend öffnen sich weitere Konfigurationsabschnitte, in denen sich die Reviewphasen wiederfinden:
468
469 * **1. Schritt: Review**
470 * ** 2. Schritt: Feedback (optional)**
471 * ** 3. Schritt: Ergebnisanzeige**
472
473 [[image:attach:Editor - PeerReview Abschnitte_de.png]]
474
475 Nachdem Sie die Funktion Peer Review für Ihre Aufgabe aktiviert haben, können Sie die Einstellungen entsprechend Ihrer Bedürfnisse anpassen.
476
477 === Konfiguration zum 1. Schritt: Review ===
478
479 Legen Sie im ersten Abschnitt Rahmenbedingungen für die Reviewvergabe fest.
480
481 {{expand title="Konfiguration im Abschnitt Review ..."}}
482 (% class="wrapped" %)
483 |(% class="numberingColumn" %)(% class="numberingColumn" %)
484 (((
485 1
486 )))|(((
487 **Zeitraum für Review: **Legen Sie ein Zeitfenster fest, in welchem Nutzer Reviews einreichen können. Innerhalb dieses Zeitfensters können bereits eingereichte Reviews beliebig vom Ersteller verändert werden.
488 )))|(% rowspan="4" %)(% rowspan="4" %)
489 (((
490 (% class="content-wrapper" %)
491 (((
492 [[image:attach:Editor - Peer Review Reviewvergabe konfigurieren_de.png]]
493 )))
494 )))
495 |(% class="numberingColumn" %)(% class="numberingColumn" %)
496 (((
497 2
498 )))|(((
499 (% class="content-wrapper" %)
500 (((
501 **Legen Sie eine Mindestanzahl von Reviews fest**, die jeder Nutzer abgeben muss. Optional können Sie weitere, **zusätzliche Reviews erlauben**. Wenn Sie diese Checkbox markieren, kann jeder Nutzer freiwillig weitere Reviews erstellen.
502
503 {{note title="Unterschreitung der Mindestanzahl"}}
504 Optimal ist eine Mindestanzahl von drei Reviews. Wenn Sie diese Anzahl unterschreiten, beachten Sie bitte die Hinweise auf der Seite Auswirkung der [[Unterschreitung der Mindestanzahl>>doc:||anchor="Mindestanzahl"]].
505 {{/note}}
506
507 (% class="Textbody" %)
508 Unabhängig von den Reviews der Teilnehmer, können berechtigte Personen (z.B. Kursautoren) im Bewertungswerkzeug selbst Reviews zu den Teilnehmerlösungen verfassen. Diese werden als Expertenreview gekennzeichnet. Weitere Informationen enthält der Abschnitt [[Expertenreview erstellen>>doc:||anchor="Expertenreview"]]
509 )))
510 )))
511 |(% class="numberingColumn" %)(% class="numberingColumn" %)
512 (((
513 3
514 )))|(((
515 **Konfigurieren Sie die Review-Vorlage:**
516
517 * Optional können Sie im Textfeld **Hinweise für den Reviewer** eintragen.
518 * Wählen Sie die gewünschte** Punktevergabe**. Es stehen Ihnen die Optionen //Gesamtpunktzahl vergeben// und //Punkte je Freitextfeld// zur Verfügung.
519 * Geben Sie die **Punktzahl** an, die die Reviewer **maximal** vergeben können.
520 * Fügen Sie optional weitere **Freitextfelder** hinzu.
521 * Wählen Sie die Option //Dokumente - Reviewer dürfen Dateien hochladen// aus, wenn die Teilnehmer **Dateien innerhalb des Review** hinzufügen sollen.
522 )))
523 |(% class="numberingColumn" %)(% class="numberingColumn" %)
524 (((
525 4
526 )))|(((
527 **Speichern** Sie Ihre Eingaben.
528 )))
529
530 \\
531
532 {{info title="Hinweis"}}
533 Um die gleichmäßige Verteilung der Reviews zu gewährleisten, empfehlen wir, jeweils konkrete Zeiträume für die Abgabe der Aufgabe, der Review-Phase und der Feedback-Phase festzulegen. Die Beschränkung des Abgabezeitraums der Aufgaben stellen Sie im Zugangs-Tab des Kursbausteines **Aufgabe** ein (Zugang>Abgabeordner>Datumsabhängig). So verhindern Sie die Abgabe von Aufgaben, wenn die Review-Phase bereits begonnen hat.
534 {{/info}}
535 {{/expand}}
536
537 === Konfiguration zum 2. Schritt: Feedback (optional) ===
538
539 Optional können Sie Ihren Nutzern die Möglichkeit einrichten, Feedback auf erhaltene Reviews zu geben. Klicken Sie auf die Checkbox **Der Teilnehmer kann Feedback zu den erhaltenen Reviews geben,** um den Feedbackprozess zu konfigurieren.\\
540
541 [[image:attach:Editor - Peer Review Feedbackvergabe aktivieren_de.png]]
542
543 {{expand title="Konfiguration im Abschnitt Feedback ..."}}
544 (% class="auto-cursor-target" %)
545 Das Aktivieren dieser Option öffnet für Sie weitere Einstellungsmöglichkeiten.
546
547 (% class="wrapped" %)
548 |(% class="numberingColumn" %)(% class="numberingColumn" %)
549 (((
550 1
551 )))|(% colspan="1" %)(% colspan="1" %)
552 (((
553 **Zeitraum: **Legen Sie ein Zeitfenster fest, in welchem Nutzer Feedback zu Reviews ihrer Aufgabenlösung geben können.
554 Innerhalb dieses Zeitfensters können eingereichte Feedbacks beliebig vom Ersteller verändert werden.
555 )))|(% rowspan="3" %)(% rowspan="3" %)
556 (((
557 (% class="content-wrapper" %)
558 (((
559 [[image:attach: Editor- Peer Review Feedbackvergabe konfigurieren_de.png]]
560 )))
561 )))
562 |(% class="numberingColumn" %)(% class="numberingColumn" %)
563 (((
564 2
565 )))|(% colspan="1" %)(% colspan="1" %)
566 (((
567 **Konfigurieren Sie die Feedback-Vorlage:**
568
569 * Optional können Sie im Textfeld **Hinweise zum Feedback** eintragen.
570 * Wählen Sie die gewünschte** Punktvergabe**. Es stehen Ihnen die Optionen //Gesamtpunktzahl vergeben// und //Punkte je Freitextfeld// zur Verfügung. Die Punktebewertung innerhalb eines Feedbacks dient der qualitativen Bewertung von Reviews.
571 * Fügen Sie optional weitere **Freitextfelder** hinzu
572 )))
573 |(% class="numberingColumn" %)(% class="numberingColumn" %)
574 (((
575 3
576 )))|(((
577 **Speichern **Sie Ihre Angaben.
578 )))
579 {{/expand}}
580
581 === Konfiguration zum 3. Schritt: Ergebnisanzeige ===
582
583 Legen Sie hier die Einstellungen zur der Anzeige der Gesamtergebnisse für die Teilnehmer fest.
584
585 {{expand title="Konfiguration im Abschnitt Ergebnisanzeige ..."}}
586 (% class="wrapped" %)
587 |(% class="numberingColumn" %)(% class="numberingColumn" %)
588 (((
589 1
590 )))|(((
591 (% style="color: rgb(51,51,51);" %)Legen Sie einen **Zeitraum **fest, in welchem Nutzer die Gesamtergebnisse einsehen können. Wenn Sie beide Felder leer lassen, sieht der Nutzer seine Ergebnisse sobald die Bedingungen erfüllt sind.
592
593 )))|(% rowspan="2" %)(% rowspan="2" %)
594 (((
595 (% class="content-wrapper" %)
596 (((
597 [[image:attach:Editor - Ergebninsanzeige konfigurieren_de.png]]
598 )))
599 )))
600 |(% class="numberingColumn" %)(% class="numberingColumn" %)
601 (((
602 2
603 )))|(((
604 (% class="content-wrapper" %)
605 (((
606 (% style="color: rgb(51,51,51);" %)Legen Sie die **Bedingungen** fest, welche für die Anzeige der Ergebnisse notwendig sind. Es müssen immer alle festgelegten Bedingungen erfüllt sein, damit die Ergebnisse den Nutzern angezeigt werden. (Die Bedingungen werden durch **//UND// **verknüpft.)
607
608 (% style="color: rgb(51,51,51);" %)Wählen Sie zwischen
609
610
611 * Ergebnisse erst anzeigen, wenn für die (% style="text-align: left;" %)**Aufgabe**
612 ** (% style="color: rgb(51,51,51);" %)die Mindestanzahl an Reviews vorliegt (D.h. wenn der Nutzer für seine Lösung die festgelegte Mindestanzahl an Reviews erhalten hat)
613 ** (% style="color: rgb(51,51,51);" %)die Bewertung durch den Tutor freigeschalten wurde (D.h. ein Peer Review mit aktiver Moderation durch den Tutor)
614 * Ergebnisse erst anzeigen, wenn der (% style="text-align: left;" %)**Teilnehmer**
615 ** die Mindestanzahl an Reviews abgegeben hat
616 ** für die erhaltenen Reviews Feedback abgegeben hat
617
618 {{expand title="Exkurs Review mit Moderation ..."}}
619 {{info title=" Review mit Moderation"}}
620 Die Peer Review Funktion kann mit und ohne aktive Begleitung durch den Tutor erfolgen.
621
622 (% class="Textbody" %)
623 Für ein Peer Review **mit Moderation** aktivieren Sie die Checkbox **Ergebnisse erst anzeigen, wenn für die Aufgabe die Bewertung durch den Tutor freigeschalten wurde**. Das bedeutet, dass alle Reviews und Feedbacks durch den Tutor einzeln geprüft und akzeptiert bzw. abgelehnt werden müssen. Es erfolgt keine automatische Ergebnisauswertung, die Ergebnisse stehen den Nutzern erst nach Freigabe durch den Tutor zur Verfügung. (% style="color: rgb(51,51,51);" %)Weitere Informationen enthält der Abschnitt(%%) [[Peer Review mit Moderation>>doc:||anchor="Moderation"]].
624
625 (% class="Textbody" %)
626 Die Teilnehmer haben unabhängig davon immer die Möglichkeit, (% style="color: rgb(51,51,51);" %)Reviews als unangemessen an den Tutor zu melden. In diesem Fall wird der Tutor benachrichtigt und muss diese Reviews separat prüfen. Weitere Informationen enhält der Abschnitt(%%) [[Unangemessenes Reviews bearbeiten>>doc:||anchor="unangemessen"]].
627
628 (% style="color: rgb(51,51,51);" %)
629
630 {{/info}}
631 {{/expand}}
632
633 (% class="auto-cursor-target" %)
634
635 )))
636 )))
637
638 {{note title="Deaktivierte Feedbackoption"}}
639 Im Bewertungswerkzeug können **berechtigte Nutzer** (z.B. Kursverantwortliche)** jederzeit alle Lösungsvorschläge und zugehörige Reviews sowie Feedbacks einsehen**.
640
641 **Kursnutzer** können jedoch - bei deaktivierter Feedback-Option - die für ihre Lösung erhaltenen Reviews **erst mit Freischalten der (Gesamt)Ergebnisse** sehen. (Die Möglichkeit ein als unangemessen empfundenes Review zu melden haben sie dann ebenfalls erst zu diesem Zeitpunkt.)
642 {{/note}}
643 {{/expand}}
644 {{/layout-cell}}
645 {{/layout-section}}
646
647 {{layout-section ac:type="single"}}
648 {{layout-cell}}
649 == Gesamtergebnisse zum Reviewprozess
650 ==
651
652 Als Autor haben Sie zu jeder Zeit im **Bewertungswerkzeug** einen Überblick, welcher Nutzer (eine Aufgabe gezogen), eine Lösung abgegeben, ein Review eingereicht oder ein Feedback verfasst hat.
653 \\
654
655 [[image:attach:Bewertungswerkzeug - Übersicht zum Peer Review_de.png]]
656
657 In dieser Tabelle können Sie zusätzlich, die von den angezeigten Nutzern vergebenen Reviews und deren Status einsehen oder in die Einzelbewertungansicht eines Nutzers wechseln.
658
659 {{info}}
660 Die Zuordnung der Nutzernamen zu Aufgabenlösungen, Reviews oder Feedback sind jedoch nur im Bewertungswekzeug sichtbar, nicht aber für die Teilnehmer in der Kursansicht oder den Dialogen zur Review- oder Feedbackvergabe.
661 {{/info}}
662
663 === Übersicht im Bewertungswerkzeug aufrufen ===
664
665 Um den Stand zum Reviewprozess im Bewertungswerkzeug aufzurufen, gehen Sie wie folgt vor:
666
667 {{expand title="Übersicht im Bewertungswerkzeug aufrufen ..."}}
668 \\
669
670 (% class="wrapped" %)
671 |(((
672 (% class="content-wrapper" %)
673 (((
674 Gehen Sie in das **Bewertungswerkzeug** des gewünschten Kurses.
675 )))
676 )))|(((
677 (% class="content-wrapper" %)
678 (((
679 [[image:attach:Kursrun - Bewertungswerkzeug öffnen_de.png]]
680 )))
681 )))
682 |(((
683 Klicken Sie im linken Menü auf die Auswahl **Nach Kursstruktur**.
684 )))|(((
685 (% class="content-wrapper" %)
686 (((
687 [[image:attach:Bewertungswerkzeug - Nach Kursstruktur_de.png]]
688 )))
689 )))
690 |(((
691 Wählen Sie den gewünschten Kursbaustein vom Typ Aufgabe und anschließend ggf. eine Teilnehmergruppe aus.
692 )))|(((
693 (% class="content-wrapper" %)
694 (((
695 [[image:attach:Bewertungswerkzeug - Gruppenauswahl_de.png]]
696 )))
697 )))
698 |(((
699 Die angezeigte Tabelle enthält Angaben zu den durchgeführten Reviews andere Teilnehmer. Neben dem Namen der Nutzer, die das Review erstellt haben, sind Gesamtpunkte und Hinweise zum Review-Status enthalten. Über einen Link können alle Reviewinhalte mit dem gegebenenfalls vorliegenden Feedback zum Review angezeigt werden.
700 )))|(((
701 (% class="content-wrapper" %)
702 (((
703 [[image:attach:Bewertungswerkzeug - Übersicht zum Peer Review_de.png]]
704 )))
705 )))
706 {{/expand}}
707
708 (% class="auto-cursor-target" %)
709 Die geöffnete Tabelle enthält **Informationen zum Stand des Reviewprozess aller Nutzer **der gewählten Gruppe.
710
711 {{expand title="Informationen in der Detailansicht ..."}}
712 (% class="wrapped" %)
713 |(% class="numberingColumn" %)(% class="numberingColumn" %)
714 (((
715 1
716 )))|(((
717 Name des Nutzer mit Link zur Detailbewertung
718 )))|(((
719 Klicken Sie auf den angezeigten Namen eines Nutzers. Es öffnet sich die Detailansicht der Bewertung zu diesem Kursbaustein für den gewählten Nutzer.
720 )))|(% rowspan="5" %)(% rowspan="5" %)
721 (((
722 (% class="content-wrapper" %)
723 (((
724 [[image:attach:Bewertungswerkzeug - Informationen der Tabelle_de.png]]
725 )))
726 )))
727 |(% class="numberingColumn" %)(% class="numberingColumn" %)
728 (((
729 2
730 )))|(((
731 Vergebene Reviews
732 )))|(((
733 Der Link auf dem Eintrag öffnet einen Dialog mit den vom Nutzer vergebenen Reviews.
734 )))
735 |(% class="numberingColumn" %)(% class="numberingColumn" %)
736 (((
737 3
738 )))|(((
739 (% class="content-wrapper" %)
740 (((
741 [[image:attach:Icon_Warnung.png]]Gemeldete Reviews
742 )))
743 )))|(((
744 (% class="content-wrapper" %)
745 (((
746 Das Icon[[image:attach:Icon_Warnung.png]]signalisiert, das mindestens ein Review dieses Nutzers als unangemessen gemeldet wurde. Details sehen Sie, wenn Sie den Link anklicken.
747 )))
748 )))
749 |(% class="numberingColumn" %)(% class="numberingColumn" %)
750 (((
751 4
752 )))|(% colspan="1" %)(% colspan="1" %)
753 (((
754 (% class="content-wrapper" %)
755 (((
756 [[image:attach:Icon_Reviewanzahl reicht nicht aus_de.png]]Anzahl der Reviews reicht nicht aus
757 )))
758 )))|(% colspan="1" %)(% colspan="1" %)
759 (((
760 (% class="content-wrapper" %)
761 (((
762 Die bisher zur Lösung dieses Nutzers erhaltenen Reviews liegen unter der konfigurierten Mindestanzahl an Reviews. Sollte der Zeitraum für die abzugebenden Reviews bereits abgelaufen und die Mindestanzahl nicht erreicht worden sein, sollten Sie die Bewertung des betroffenen Nutzers überprüfen, gegebenenfalls ein Expertenreview verfassen und das Bewertungsformular anpassen.
763 )))
764 )))
765 |(% class="numberingColumn" %)(% class="numberingColumn" %)
766 (((
767 5
768 )))|(((
769 (% class="content-wrapper" %)
770 (((
771 [[image:attach:Icon_Tabelle anpassen_de.png]]
772 )))
773 )))|(((
774 (% class="content-wrapper" %)
775 (((
776 Werden nicht alle benötigten Spalten angezeigt, können Sie die Spaltenkonfiguration mit Klick auf dieses Icon ändern.
777 )))
778 )))
779 {{/expand}}
780
781 Wenn Sie stattdessen die **Detailbewertungsansicht** **eines Nutzers** öffnen, erhalten Sie Informationen zum **Reviewprozess **der Lösung** dieses Nutzers**.
782
783 {{expand title="Informationen in der Detailansicht ..."}}
784 (% class="wrapped" %)
785 |(% class="numberingColumn" %)(% class="numberingColumn" %)
786 (((
787 1
788 )))|(((
789 gewählter Kursbaustein
790 )))|(% rowspan="3" %)(% rowspan="3" %)
791 (((
792 [[image:attach:Bewertungswerkzeug - Detailansicht1_de.png]]
793
794 (% class="content-wrapper" %)
795 (((
796 \\
797 )))
798 )))
799 |(% class="numberingColumn" colspan="1" %)(% class="numberingColumn" colspan="1" %)
800 (((
801 2
802 )))|(% colspan="1" %)(% colspan="1" %)
803 (((
804 gewählter Nutzer
805 )))
806 |(% class="numberingColumn" colspan="1" %)(% class="numberingColumn" colspan="1" %)
807 (((
808 3
809 )))|(% colspan="1" %)(% colspan="1" %)
810 (((
811 Aufgabe und Lösung des Nutzers
812 )))
813 |(% class="numberingColumn" %)(% class="numberingColumn" %)
814 (((
815 4
816 )))|(((
817 Erhaltene Reviews und Status der Reviews
818 )))|(% rowspan="4" %)(% rowspan="4" %)
819 (((
820 [[image:attach:Bewertungswerkzeug - Detailansicht2_de.png]]
821
822 (% class="content-wrapper" %)
823 (((
824 \\
825 )))
826
827
828 \\
829 )))
830 |(% class="numberingColumn" %)(% class="numberingColumn" %)
831 (((
832 5
833 )))|(((
834 Möglichkeit ein Expertenreview zu vergeben
835 )))
836 |(% class="numberingColumn" %)(% class="numberingColumn" %)
837 (((
838 6
839 )))|(((
840 Bewertungsformular mit Gesamtergebnis
841 )))
842 |(% class="numberingColumn" %)(% class="numberingColumn" %)
843 (((
844 7
845 )))|(((
846 Änderungsverlauf zur Bewertung einsehen
847 )))
848 {{/expand}}
849
850 (% class="Textbody" %)
851
852
853 {{id name="unangemessen"/}}
854
855 (% class="Textbody" %)
856 === Unangemessenes Reviews bearbeiten ===
857
858 (% class="Textbody" %)
859 Ein Nutzer hat ein als unangemessen empfundenes Review gemeldet. Dieses gemeldete Review müssen Sie prüfen und akzeptieren oder ablehnen. Je nach Wahl, wird das Review anschließend im Gesamtergebnis berücksichtigt oder nicht.
860
861 {{expand title="Umgang mit gemeldeten Reviews ..."}}
862 (% class="wrapped" %)
863 |(((
864 (% class="content-wrapper" %)
865 (((
866 [[image:attach:Icon_Gemeldet_de.png]]
867 )))
868 )))|(((
869 (% class="content-wrapper" %)
870 (((
871 Hat der Nutzer ein Review als unangemessen gemeldet, erscheint in der Spalte „Review-Status“ der Eintrag „Gemeldet“. Öffnen Sie nun die Detailansicht des entsprechenden Reviews. Im sich öffnenden Dialog urteilen Sie über die Meldung. Wählen Sie zwischen  [[image:attach:Icon_Review ignorieren_de.png]]und [[image:attach:Icon_Review akzeptieren_de.png]].
872 )))
873 )))
874 |(((
875 (% class="content-wrapper" %)
876 (((
877 [[image:attach:Icon_wird ignoriert_de.png]]
878 )))
879 )))|(((
880 Mit Klick auf den Button **Review ignorieren** stimmen Sie dem Einwand des Nutzers zu und das als unangemessen gemeldete Review wird aus der Berechnung der Gesamtauswertung entfernt. Der Review-Status ändert sich von „Gemeldet“ auf „**Gemeldet (wird ignoriert)**". Durch den Ausschluss eines Reviews kann die Anzahl der Reviews des Nutzers kleiner sein, als die vorgegebene Mindestanzahl. Bitte prüfen Sie deshalb die gesamte Bewertung und passen Sie sie, wenn nötig, über das Bewertungsformular oder per Expertenreview an.
881 )))
882 |(% colspan="1" %)(% colspan="1" %)
883 (((
884 (% class="content-wrapper" %)
885 (((
886 [[image:attach:Icon_wird akzeptiert_de.png]]\\
887 )))
888 )))|(% colspan="1" %)(% colspan="1" %)
889 (((
890 Mit  Klick auf den Button **Review akzeptieren** lehnen Sie den Einwand des meldenden Nutzers ab und das gemeldete Review bleibt in der Berechnung der Gesamtauswertung enthalten. Der Review-Status ändert sich von „Gemeldet“ auf „**Gemeldet (wird akzeptiert)**".
891 )))
892 |(% colspan="1" %)(% colspan="1" %)
893 (((
894 (% class="content-wrapper" %)
895 (((
896 [[image:attach:Icon_Expertenreview_de.png]]
897 )))
898 )))|(% colspan="1" %)(% colspan="1" %)
899 (((
900 Es wurde ein [[Expertenreview >>doc:||anchor="Expertenreview"]]vergeben. Dieses fließt in die Gesamtbewertung ein.
901 )))
902 {{/expand}}
903
904 (% class="Textbody" %)
905
906
907 {{id name="Moderation"/}}
908
909 (% class="Textbody" %)
910 === Peer Review mit Moderation ===
911
912 Wollen Sie als Kursverantwortlicher den Reviewprozess begleiten und die Bewertungen vor Freigabe an die Nutzer kontrollieren, so können Sie dies mit der Option "**Ergebnisse erst anzeigen, wenn für die Aufgabe die Bewertung durch den Tutor freigeschalten wurde**" einstellen. Konfigurieren Sie diese Option im Kurseditor zum Abschnitt Ergebnisanzeige.
913
914 Ist die Moderationsfunktion aktiviert, bedeutet dies, dass Sie jedes Review einzeln überprüfen und akzeptieren oder ablehnen müssen. Erst wenn dies abgeschlossen ist, kann die Bewertung übernommen werden.
915
916 {{expand title="Bewertungsprozess moderieren ..."}}
917 (% class="wrapped" %)
918 |=(% colspan="1" %)(% colspan="1" %)
919 (((
920 Review-Status
921 )))|=(% colspan="1" %)(% colspan="1" %)
922 (((
923 (% class="content-wrapper" %)
924 (((
925 Erläuterung
926 )))
927 )))
928 |(((
929 (% class="content-wrapper" %)
930 (((
931 [[image:attach:Icon_Prüfung ausstehend_de.png]]
932 )))
933 )))|(((
934 (% class="content-wrapper" %)
935 (((
936 Ist ein moderiertes Peer Review noch nicht geprüft, erscheint in der Spalte „Review-Status“ der Eintrag „**Prüfung ausstehend**“. Öffnen Sie mit Klick auf den Eintrag "Review anzeigen"die Detailansicht des Reviews und beurteilen Sie dieses mit Klick auf den Button [[image:attach:Icon_Review akzeptieren_de.png]]oder[[image:attach:Icon_Review ablehnen_de.png]].
937 )))
938 )))
939 |(((
940 (% class="content-wrapper" %)
941 (((
942 [[image:attach:Icon_akzeptiert_de.png]]\\
943 )))
944 )))|(((
945 (% class="content-wrapper" %)
946 (((
947 Mit dem Button „Review akzeptieren“ haben Sie dem Review zugestimmt und dieses fließt in die Gesamtauswertung ein. Der Review-Status ändert sich von „Prüfung ausstehend“ auf „**Akzeptiert**“.
948 )))
949 )))
950 |(% colspan="1" %)(% colspan="1" %)
951 (((
952 (% class="content-wrapper" %)
953 (((
954 [[image:attach:Icon_abgelehnt_de.png]]
955 )))
956 )))|(% colspan="1" %)(% colspan="1" %)
957 (((
958 (% class="content-wrapper" %)
959 (((
960 Mit dem Button „Review ablehnen“ haben Sie das Review zurückgewiesen und es fließt __nicht__ in die Berechnung der Gesamtauswertung ein. Der Review-Status ändert sich von „Prüfung ausstehend“ auf „**Abgelehnt**“.
961
962 Durch den Ausschluss eines Reviews kann die Anzahl der erhaltenen Reviews kleiner sein, als die vorgegebene Mindestanzahl. Bitte prüfen Sie deshalb die gesamte Bewertung und passen Sie sie, wenn nötig, über das Bewertungsformular oder durch ein [[Expertenreview >>doc:||anchor="Expertenreview"]]an.
963 )))
964 )))
965 |(% colspan="1" %)(% colspan="1" %)
966 (((
967 (% class="content-wrapper" %)
968 (((
969 [[image:attach:Icon_Bewertung übernehmen_de.png]]
970 )))
971 )))|(% colspan="1" %)(% colspan="1" %)
972 (((
973 (% class="content-wrapper" %)
974 (((
975 Der Button **Review übernehmen** wird erst aktiv, wenn alle vorhandenen Reviews angesehen und akzeptiert oder abgelehnt wurden. Der Klick auf den Button überträgt und speichert den Durchschnitt der Gesamtpunkte aller Einzel-Reviews in das Gesamtpunktefeld des Bewertungsformulars. Je nach Konfiguration führt dies zum bestehen des Kursbausteins.
976 )))
977 )))
978 {{/expand}}
979
980 [[image:attach:Bewertungswerkzeug - Moderation_de.png]]
981
982 \\
983
984 \\
985
986 {{id name="Expertenreview"/}}
987
988 (% class="Textbody" %)
989 === Expertenreview erstellen ===
990
991 Als Kursverantwortlicher haben Sie jederzeit die Möglichkeit, im Bewertungswerkzeug ebenfalls ein Review für eine Teilnehmerlösung zu erstellen. Das kann je nach Konfiguration notwendig werden, wenn ein Teilnehmer zu wenige Reviews für eine Bewertung erhalten hat, andere Teilnehmer nicht genügend Reviews vergeben haben oder wenn es unangemessene Reviews gab.
992
993 {{expand title="Expertenreview durchführen ..."}}
994 \\
995
996 (% class="wrapped" %)
997 |(((
998 Wechseln Sie im Bewertungswerkzeug in die Detailansicht der Bewertung eines Nutzers.
999 )))|(% rowspan="3" %)(% rowspan="3" %)
1000 (((
1001 (% class="content-wrapper" %)
1002 (((
1003 [[image:attach:Bewertungswerkzeug - Expertenreview starten_de.png]]
1004 )))
1005 )))
1006 |(((
1007 Im Bereich **Erhaltene Peer Reviews** finden Sie unter der Tabelle den Button **Expertenreview abgeben** //**.
1008 **//
1009 )))
1010 |(((
1011 Bei Klick auf den Button öffnet sich das Reviewformular, in dem Sie nun ein Review für den Teilnehmer abgeben können. Für das Expertenreview steht Ihnen das gleiche Formular zur Verfügung, welches auch die Teilnehmer für das Review angezeigt bekommen.
1012
1013 Geben Sie das Review mit **Speichern und Schließen** ab. Ihr Review erhält in der Übersichtstabelle und allen Nutzeransichten den Status bzw. Zusatz **Expertenreview**.
1014 )))
1015 {{/expand}}
1016
1017
1018
1019 {{id name="Mindestanzahl"/}}
1020
1021 === Auswirkung der Unterschreitung der Mindestanzahl ===
1022
1023 Pädagogisches Ziel der Bewertungsform Peer Review ist ein [[Peer Assessment>>url:https://de.wikipedia.org/wiki/Peer_Assessment||shape="rect"]] zu ermöglichen. Somit wurde bei der Konzeption dieser Bewertungsform darauf geachtet, sehr viele Grundszenarien zu ermöglichen und vor allem die Anonymität und Zufälligkeit der Vergabe von Teilnehmerlösungen zur Begutachtung als Zielkriterium festgelegt.
1024
1025 Wenn Sie die Grundeinstellung** Mindestzahl an Reviews verringern und gleichzeitig keine zusätzlichen Reviews erlauben** , sollten Sie deshalb folgendes beachten, um den Verlauf der Bewertung zu optimieren:
1026
1027 \\
1028
1029 {{expand title="Beachten Sie für einen optimalen Verlauf ..."}}
1030 * **Vergeben Sie feste, sich nicht überschneidende Datumsbeschränkungen**: Die Lösungsabgabe sollte immer zeitlich eingeschränkt vor der Reviewphase liegen (Zugang>Abgabeordner>Datumsbeschränkt bis). Damit ist die zum Start der Reviewphase zur Verfügung stehenden Anzahl an Lösungsdateien fix und ändert sich nicht nachträglich während der Reviewphase.
1031
1032 * Mit Start der Reviewphase werden die zur Verfügung stehenden Reviews an die Aufrufenden bei Aufruf des Reviews (= Klick auf "Review starten") jeweils zufällig verteilt. D.h die Zuordnung eines Reviews erfolgt immer erst wenn der Nutzer auf den Button drückt und wird nicht vorher festgelegt. Dies garantiert in anderen Szenarien einem sehr offenen PeerReview-Prozess der auch später abgegebe Lösungen optimal in den Prozess einbindet.
1033
1034 * Bei Reduktion der Mindestanzahl auf 1 bekommt jeder Nutzer ein Review zu seiner Lösung, wenn alle Reviews erfolgt sind.
1035
1036 * (((
1037 (% class="auto-cursor-target" %)
1038 Einzig **der letzte Reviewende kann unter Umständen selbst kein Review von einem Peer für seine Lösung erhalten** und im Gegenzug höchstens ein anderer Nutzer zwei Reviews bekommt. Es ist jedoch auch mit dieser Konfiguration ausgeschlossen, dass mehr als ein Nutzer mehr als zwei Reviews erhält. Zusätzlich sinkt die Wahrscheinlichkeit des Auftretens dieses Falles mit steigender Nutzeranzahl.
1039 )))
1040 *
1041
1042 {{expand title="Exkurs zur ungeraden Reviewanzahl ..."}}
1043 Das Problem entsteht durch das "nacheinander ziehen" der Reviews. Dies wurde gewählt, um in allen anderen Szenarien vor allem die Gleichverteilung bei mehreren Reviews zu ermöglichen und dabei bestmögliche Anonymität und Zufallsverteilung (auch bei später eingereichten Lösungen ) herzustellen.
1044
1045 Sind allerdings nur noch genau drei Personen (A,B,C) in der Auswahl, kann es zu folgender Zuordnung kommen:  (A:B bedeutet Nutzer A zieht Lösung von Nutzer B zur Reviewvergabe und führt dieses Review durch)
1046 A:B; B:C; C:A => Alle haben ein Review erhalten und ein Review vergeben
1047 A:C B:A C:B => Alle haben ein Review erhalten und ein Review vergeben
1048 A:B B:A C? => In diesem Fall wird C zufällig die Lösung von A oder B zugeteilt bekommen und C das Review für diese Lösung vornehmen. Damit erhält diese Person zwei Reviews und das erwähnte Expertenreview für die Lösung von C wird notwendig. Ist dagegen bspw. die Option "Zusätzliche Reviews erlauben"aktiviert, wird das nächstfolgende Review, was ein Nutzer, der bereits 1 Review vergeben hat, für C sein und damit auch C ein Review durch einen Peer erhalten.
1049 {{/expand}}
1050
1051 * Wenn der beschriebene Ausnahmefall eintritt, müssen Sie für diesen Nutzer ein [[Expertenreview >>url:http://www.bps-system.de#Expertenreview||shape="rect"]]erstellen. Sie können das Auftreten diesen Falles weiter minimieren, in dem Sie die zusätzliche Reviewvergabe erlauben.
1052 {{/expand}}
1053
1054 \\
1055
1056 \\
1057
1058 \\
1059
1060
1061 \\
1062 {{/layout-cell}}
1063 {{/layout-section}}
1064 {{/layout}}
1065 {{/sv-translation}}
1066
1067 {{sv-translation language="en"}}
1068 {{layout}}
1069 {{layout-section ac:type="two_right_sidebar"}}
1070 {{layout-cell}}
1071 A **peer review** allows an anonymous review of submitted tasks by peer participants. From these participant reviews, an overall assessment of each submitted task may be generated.
1072
1073 Depending on the configuration, the peer review may include the following steps:
1074
1075 * **Step 1: Review of other task solutions**
1076 * **Step 2: Provision of feedback on existing reviews of your own task solutions**
1077 * **Step 3: Display of the overall assessment obtained**
1078
1079 Find out more below about the
1080
1081 * **[[configuration from an author's point of view>>doc:||anchor="authors"]] **to start configuring these steps.
1082 * **[[usage from a learner's point of view>>doc:||anchor="information"]] ** to learn more about how the review process works from a user’s perspective and what actions are expected of participants in this process.
1083
1084 \\
1085
1086
1087
1088 {{id name="information"/}}
1089 {{/layout-cell}}
1090
1091 {{layout-cell}}
1092 {{scroll-ignore scroll-pdf="true" scroll-office="true" scroll-chm="true" scroll-docbook="true" scroll-eclipsehelp="true" scroll-epub="true" scroll-html="true"}}
1093 {{panel title="Content"}}
1094
1095
1096 {{toc minLevel="2"/}}
1097 {{/panel}}
1098 {{/scroll-ignore}}
1099 {{/layout-cell}}
1100 {{/layout-section}}
1101
1102 {{layout-section ac:type="single"}}
1103 {{layout-cell}}
1104 (% style="margin-left: 0.0cm;" %)
1105 == (% style="color: rgb(63,68,68);" %)Usage: Learners' View(%%) ==
1106
1107 \\
1108
1109 (% class="wrapped" %)
1110 |(((
1111 If the course author has enabled an assessment for a task course element in the form of a peer review procedure, the section **Information for the procedure of the peer review **will appear in the task element.
1112 )))|(((
1113 (% class="content-wrapper" %)
1114 (((
1115 [[image:attach:Kursrun - Aufgabe mit PeerReview_en.png]]
1116 )))
1117 )))
1118 |(((
1119 Open this section to find out more about the individual peer review steps and what other settings have been configured.
1120 )))|(((
1121 (% class="content-wrapper" %)
1122 (((
1123 [[image:attach:Kursrun - Ablauf PeerReview_en.png]]
1124 )))
1125 )))
1126 |(((
1127 (% class="content-wrapper" %)
1128 (((
1129 The review process usually begins after submitting your own solution. Therefore, start by uploading or creating your own response to a question in the **Submit solution** area.
1130
1131 {{info}}
1132 If an anonymous review is desired, please make sure that the file titles and properties as well as the file content do not allow any direct conclusions about the creator.
1133 {{/info}}
1134 )))
1135 )))|(((
1136 (% class="content-wrapper" %)
1137 (((
1138 [[image:attach:Kursrun - Lösung abgeben_en.png]]
1139 )))
1140 )))
1141
1142 === 1. Review of other task solutions ===
1143
1144 If the review area is accessible, a corresponding request will appear, and you will be able to see the **Submit reviews for other participants** area. To start the review process, click on **Start review**.
1145
1146 [[image:attach:Kursrun - Review vergeben_en.png]]
1147
1148 {{expand title="Start the review process ..."}}
1149 (% class="wrapped" %)
1150 |(% colspan="2" %)(% colspan="2" %)
1151 (((
1152 (% class="content-wrapper" %)
1153 (((
1154 Clicking on the **Start review** button will open the review form. Fill in the form to review the task solution of another user according to the review specifications of your supervisor. The form contains the following information:
1155
1156 (% class="wrapped" %)
1157 |(% class="numberingColumn" %)(% class="numberingColumn" %)
1158 (((
1159 1
1160 )))|(((
1161 An indication of **how many reviews** you need to submit.
1162 )))|(% rowspan="5" %)(% rowspan="5" %)
1163 (((
1164 (% class="content-wrapper" %)
1165 (((
1166 [[image:attach:Kursrun - Reviewformular füllen_en.png]]
1167 )))
1168 )))
1169 |(% class="numberingColumn" %)(% class="numberingColumn" %)
1170 (((
1171 2
1172 )))|(((
1173 The just opened review.
1174 )))
1175 |(% class="numberingColumn" %)(% class="numberingColumn" %)
1176 (((
1177 3
1178 )))|(((
1179 The file you should review. Access the file by clicking on the **file name**.
1180 )))
1181 |(% class="numberingColumn" colspan="1" %)(% class="numberingColumn" colspan="1" %)
1182 (((
1183 4
1184 )))|(% colspan="1" %)(% colspan="1" %)
1185 (((
1186 Fill in the fields configured by the course author and award points if required.
1187 )))
1188 |(% class="numberingColumn" colspan="1" %)(% class="numberingColumn" colspan="1" %)
1189 (((
1190 5
1191 )))|(% colspan="1" %)(% colspan="1" %)
1192 (((
1193 Save your review and carry out further reviews if necessary (**Submit and next **button). Once all currently available reviews have been completed, close the dialogue (**Submit and close** button). Alternatively, you can pause the review editing process with **Suspend**.
1194 )))
1195
1196 {{note title="Please note!"}}
1197 (% style="letter-spacing: 0.0px;" %)Users will not be able to see the name of the creator, solution, or reviewer. These will remain completely anonymous and will not be visible to users.
1198
1199 **Attention**: The platform cannot affect properties or content in files or form fields. For example, if usernames are stored or hinted at in the file title, file properties, file content or form fields, they will be displayed accordingly.
1200 {{/note}}
1201 )))
1202 )))
1203 |(((
1204 The course creator may allow the assignment of additional reviews. In this case, more than one solution will be available to you for review.
1205 )))|(((
1206 (% class="content-wrapper" %)
1207 (((
1208 [[image:attach:Kursrun - Reviewdialog Mindestanzahl_en.png]]
1209 )))
1210 )))
1211 |(((
1212 Once a review has been submitted, it can no longer be edited (at this point). However, being the review creator, you can view your submitted reviews at any time by clicking on the **Show review** button.
1213
1214 The creator of the reviewed solution can access the review from the optional feedback session or the assessment area. A course owner has access to all assessment data in the assessment tool.
1215 )))|(((
1216 (% class="content-wrapper" %)
1217 (((
1218 [[image:attach:Kursrun - vergebene Review einsehen_en.png]]
1219 )))
1220 )))
1221 |(((
1222 The next steps in the review process can be obtained from the information section.
1223 )))|(((
1224 (% class="content-wrapper" %)
1225 (((
1226 [[image:attach:Kursrun - Ablauf PeerReview2_en.png]]
1227 )))
1228 )))
1229 {{/expand}}
1230
1231 === 2. Provision of feedback on existing reviews of your own task solutions ===
1232
1233 The course creator can allow you to comment on reviews that you have received for your own task solutions. In this case, you will be able to see the **Submit feedback for received reviews** area. To run this function, click on the **Submit feedback** button.
1234
1235 [[image:attach:Kursrun - Feedback vergeben_en.png]]
1236
1237 {{expand title="Start feedback process ..."}}
1238 The feedback form opens. Fill in the form to assess the review received according to the specifications of your supervisor. The form contains the following information:
1239
1240 (% class="wrapped" %)
1241 |(% class="numberingColumn" %)(% class="numberingColumn" %)
1242 (((
1243 1
1244 )))|(((
1245 An indication of **how much feedback** you need to give.
1246 )))|(% rowspan="6" %)(% rowspan="6" %)
1247 (((
1248 (% class="content-wrapper" %)
1249 (((
1250 [[image:attach:Kursrun - Feedback Formular_en.png]]
1251 \\\\\\
1252 )))
1253 )))
1254 |(% class="numberingColumn" %)(% class="numberingColumn" %)
1255 (((
1256 2
1257 )))|(((
1258 The just opened feedback.
1259 )))
1260 |(% class="numberingColumn" %)(% class="numberingColumn" %)
1261 (((
1262 3
1263 )))|(((
1264 The review you received and on which you should leave a comment now.
1265 )))
1266 |(% class="numberingColumn" %)(% class="numberingColumn" %)
1267 (((
1268 4
1269 )))|(((
1270 (% title="" %)
1271 If you think that the review you received might be inappropriate, you can use the **Report inappropriate review** option. Clicking on the button will open another window in which, depending on the course author's configuration, you can describe all points of criticism aimed at the review. After the supervisor has been informed, they will check the review and either refuse or accept it.
1272 )))
1273 |(% class="numberingColumn" %)(% class="numberingColumn" %)
1274 (((
1275 5
1276 )))|(((
1277 Fill in the **text fields** configured by the course author with your feedback and award **points** for the received review if required.
1278 )))
1279 |(% class="numberingColumn" colspan="1" %)(% class="numberingColumn" colspan="1" %)
1280 (((
1281 6
1282 )))|(% colspan="1" %)(% colspan="1" %)
1283 (((
1284 Save your feedback and give more feedback if necessary (**Submit and continue** button). Once all currently available feedback requests have been completed, close the dialogue (**Finish **button).
1285 )))
1286
1287 If the course author has not enabled a feedback round, you will see any reviews you might have received only with the activation of the overall results.
1288
1289 {{tip title="View feedback for created reviews"}}
1290 The feedback you have received on your submitted reviews can be found in the review section (submit reviews for other participants) by clicking on the **Show review** button. You will see an overview of all the reviews you have given there. If the entry **Show feedback for this review** is available for a review, you can view the feedback you have received by clicking on this entry.
1291 {{/tip}}
1292 {{/expand}}
1293
1294 === 3. Display of the overall assessment obtained ===
1295
1296 The course creator has a great deal of freedom in calculating and displaying the overall assessment. You can check the time frames and the selected configuration at any time in the [[Information on the peer review process>>doc:||anchor="information"]] section.
1297
1298 If the assessment is already available, it will be displayed in the upper section of the page. With the **Show evaluation **button, you can open a detailed overview of the assessment.
1299
1300 [[image:attach:Kursrun - Auswertung anzeigen_en.png]]
1301
1302 {{expand title="View assessment ..."}}
1303 (% class="wrapped" %)
1304 |(((
1305 Clicking on the **Show evaluation **button will open a dialogue box in which the assessment for all received reviews and any given feedback is displayed in a tabular overview.
1306
1307 Below the table is the **Show reviews** button for opening the detailed view.
1308 )))|(((
1309 (% class="content-wrapper" %)
1310 (((
1311 [[image:attach:Kursrun - Auswertung öffnen_en.png]]
1312 )))
1313 )))
1314 |(((
1315 The detailed view shows all received reviews and offers the possibility to report **inappropriate reviews **(even if the course author has not enabled a feedback round).
1316 )))|(((
1317 (% class="content-wrapper" %)
1318 (((
1319 [[image:attach:Kursrun - Auswertung Detailansicht_en.png]]
1320 )))
1321 )))
1322 |(((
1323 (% class="content-wrapper" %)
1324 (((
1325 The following entries are possible in the status column:
1326
1327 (% class="wrapped" %)
1328 |(((
1329 (% class="content-wrapper" %)
1330 (((
1331 [[image:attach:Icon_Expertenreview_en.png]]
1332 )))
1333 )))|(((
1334 This review was written by a course owner. Expert reviews cannot be reported as inappropriate.
1335 )))
1336 |(((
1337 (% class="content-wrapper" %)
1338 (((
1339 [[image:attach:Icon_Prüfung ausstehend_en.png]]
1340 )))
1341 )))|(((
1342 The review process is actively accompanied by a course owner. They moderate the final scoring and have not yet checked on this review or completed the overall assessment.
1343 )))
1344 |(((
1345 (% class="content-wrapper" %)
1346 (((
1347 [[image:attach:Icon_akzeptiert_en.png]]
1348 )))
1349 )))|(((
1350 The review process is actively accompanied by a course owner. They moderate the final scoring and have confirmed this review as part of the assessment. Therefore, it will also be considered in the overall assessment.
1351 )))
1352 |(((
1353 (% class="content-wrapper" %)
1354 (((
1355 [[image:attach:Icon_abgelehnt_en.png]]
1356 )))
1357 )))|(((
1358 The review process is actively accompanied by a course owner. They moderate the final scoring and have refused this review as part of the assessment. Therefore, it will not be included in the overall assessment.
1359 )))
1360 |(% colspan="1" %)(% colspan="1" %)
1361 (((
1362 (% class="content-wrapper" %)
1363 (((
1364 [[image:attach:Icon_Gemeldet_en.png]]
1365 )))
1366 )))|(% colspan="1" %)(% colspan="1" %)
1367 (((
1368 You have reported this review as inappropriate. However, no course owner has taken action yet.
1369 )))
1370 |(% colspan="1" %)(% colspan="1" %)
1371 (((
1372 (% class="content-wrapper" %)
1373 (((
1374 [[image:attach:Icon_wird ignoriert_en.png]]
1375 )))
1376 )))|(% colspan="1" %)(% colspan="1" %)
1377 (((
1378 You have reported this review as inappropriate. A course owner has approved your comment. Therefore, this review will not be included in the overall assessment.
1379 )))
1380 |(% colspan="1" %)(% colspan="1" %)
1381 (((
1382 (% class="content-wrapper" %)
1383 (((
1384 [[image:attach:Icon_wird akzeptiert_en.png]]
1385 )))
1386 )))|(% colspan="1" %)(% colspan="1" %)
1387 (((
1388 You have reported this review as inappropriate. A course owner has refused your appeal. Therefore, this review will be considered in the overall assessment.
1389 )))
1390 )))
1391 )))|(((
1392 (% class="content-wrapper" %)
1393 (((
1394 [[image:attach:Kursrun - Status zu Reviews_en.png]]
1395 )))
1396 )))
1397 {{/expand}}
1398 {{/layout-cell}}
1399 {{/layout-section}}
1400
1401 {{layout-section ac:type="single"}}
1402 {{layout-cell}}
1403
1404
1405 {{id name="authors"/}}
1406
1407 == Configuration: Authors' View ==
1408
1409 === Configuration of the peer review in the course editor ===
1410
1411 In the course element **task**, authors can enable the assessment by peer review. To do this, switch to the **Assessment** tab and select the checkbox **Activate peer review**.
1412
1413 [[image:attach:Editor - PeerReview aktivieren_en.png]]
1414
1415 This will open additional configuration sections including the review steps:
1416
1417 * (% style="letter-spacing: 0.0px;" %)**Step 1: Review**
1418 * (% style="letter-spacing: 0.0px;" %)**Step 2**(%%) (% style="letter-spacing: 0.0px;" %)**: Feedback (optional)**
1419 * (% style="letter-spacing: 0.0px;" %)**Step 3: Result display**
1420
1421 (% style="letter-spacing: 0.0px;" %)**[[image:attach:Editor - PeerReview Abschnitte_en.png]]**
1422
1423 After enabling the peer review function for your task, you can customise the settings to suit your needs.
1424
1425 === Configuration of step 1: Review ===
1426
1427 In the first section, you can define basic conditions for the review assignment.
1428
1429 {{expand title="Configuration in the review section ..."}}
1430 (% class="wrapped" %)
1431 |(% class="numberingColumn" %)(% class="numberingColumn" %)
1432 (((
1433 1
1434 )))|(((
1435 **Time frame for review: **Set a time frame for users to submit reviews. Within this time frame, submitted reviews can still be changed by the creator.
1436 )))|(% rowspan="4" %)(% rowspan="4" %)
1437 (((
1438 (% class="content-wrapper" %)
1439 (((
1440 [[image:attach:Editor - Peer Review Reviewvergabe konfigurieren_en.png]]
1441 \\\\\\\\
1442
1443 \\
1444 )))
1445 )))
1446 |(% class="numberingColumn" %)(% class="numberingColumn" %)
1447 (((
1448 2
1449 )))|(((
1450 (% class="content-wrapper" %)
1451 (((
1452 **Set a required number of reviews** every user has to submit. Optionally, you can also **allow additional reviews**. If you select this checkbox, each user can voluntarily create more reviews than the required minimum number.
1453
1454 {{note title="Number of reviews falls short of the set minimum number"}}
1455 We recommend a minimum of three reviews. If you fall below this number, please refer to the help section on the [[Impact of falling below the minimum number>>doc:||anchor="minimum number"]].
1456 {{/note}}
1457
1458 Regardless of the reviews by the participants, authorised users (e. g. course authors) can write their own reviews on participant solutions in the assessment tool. These will be marked as expert reviews. For more information, see the section [[Create expert review>>doc:||anchor="expert review"]].
1459 )))
1460 )))
1461 |(% class="numberingColumn" %)(% class="numberingColumn" %)
1462 (((
1463 3
1464 )))|(((
1465 **Configure the template review form:**
1466
1467 * Optionally, you can enter **review hints** in the text field.
1468 * Select the desired **scoring**. You can choose from the options //Overall score //and //Score per text field//.
1469 * Enter the **maximum** **score** that reviewers may award.
1470 * Optionally, add more free text fields.
1471 * Select the option //Documents – Reviewers may upload files// if the participants should be able to add **files to the review**.
1472 )))
1473 |(% class="numberingColumn" %)(% class="numberingColumn" %)
1474 (((
1475 4
1476 )))|(((
1477 **Save** your entries.
1478 )))
1479
1480 {{info title="Note"}}
1481 To ensure an even distribution of reviews, we recommend specifying specific time frames for the submission of the task, the review phase and the feedback phase. The restriction of the period for submitting the tasks can be set in the access tab of the **task** course element (access>drop box>depending on date). This prevents the submission of tasks when the review phase has already begun.
1482 {{/info}}
1483 {{/expand}}
1484
1485 === Configuration of step 2: Feedback (optional) ===
1486
1487 Optionally, you can also allow your users to provide feedback on received reviews. Select the checkbox **The participant can give feedback on received reviews** to configure the feedback process.
1488
1489 [[image:attach:Editor - Peer Review Feedbackvergabe aktivieren_en.png]]
1490
1491 {{expand title="Configuration in the feedback section ..."}}
1492 Activating this option will open further configuration options.
1493
1494 (% class="wrapped" %)
1495 |(% class="numberingColumn" %)(% class="numberingColumn" %)
1496 (((
1497 1
1498 )))|(((
1499 **Time frame: **Set a time frame for users to give feedback on reviews of their solution. Within this time frame, submitted feedback can still be changed by the creator.
1500 )))|(% rowspan="3" %)(% rowspan="3" %)
1501 (((
1502 (% class="content-wrapper" %)
1503 (((
1504 [[image:attach:Editor- Peer Review Feedbackvergabe konfigurieren_en.png]]
1505 \\\\
1506 )))
1507 )))
1508 |(% class="numberingColumn" %)(% class="numberingColumn" %)
1509 (((
1510 2
1511 )))|(((
1512 **Configure the template feedback form:**
1513
1514 * Optionally, you can enter** feedback hints** in the text field.
1515 * Select the desired **scoring**. You can choose from the options //Overall score //and //Score per text field//. The scoring within feedback serves the qualitative assessment of reviews.
1516 * Optionally, add more **free text fields**.
1517 )))
1518 |(% class="numberingColumn" %)(% class="numberingColumn" %)
1519 (((
1520 3
1521 )))|(((
1522 **Save** your entries.
1523 )))
1524 {{/expand}}
1525
1526 === Configuration of step 3: Result display ===
1527
1528 Here you can define the settings for displaying the overall results to the participants.
1529
1530 {{expand title="Configuration in the result view section ..."}}
1531 (% class="wrapped" %)
1532 |(% class="numberingColumn" %)(% class="numberingColumn" %)
1533 (((
1534 1
1535 )))|(((
1536 Set a **time frame** for users to view the overall results. If you leave both fields empty, the user will not see their results before the conditions are met.
1537 )))|(% rowspan="2" %)(% rowspan="2" %)
1538 (((
1539 (% class="content-wrapper" %)
1540 (((
1541 [[image:attach:Editor - Ergebninsanzeige konfigurieren_en.png]]
1542 )))
1543 )))
1544 |(% class="numberingColumn" %)(% class="numberingColumn" %)
1545 (((
1546 2
1547 )))|(((
1548 (% class="content-wrapper" %)
1549 (((
1550 Define the **conditions** for displaying the results. All defined conditions must always be met for the results to be displayed to the users. (The conditions are linked by ** //AND// **.)
1551
1552 Choose between:
1553
1554 * Only show results once the **task**
1555 ** has the minimum number of reviews present (i. e. if the user has received the defined minimum number of reviews for their solution)
1556 ** has its performance results approved by the supervisor (i. e. a peer review with active moderation by the supervisor)
1557 * Only show results once the **participant**
1558 ** has completed the minimum number of reviews
1559 ** has given feedback for all received reviews
1560
1561 \\
1562
1563 {{expand title="Excursion into the review with moderation ..."}}
1564 {{info title="Review with moderation"}}
1565 The peer review function can be performed with and without active support by the supervisor.
1566
1567 For a peer review **with moderation**, select the checkbox **Only show results once the task has its performance results approved by the supervisor**. This means that all reviews and feedback must be individually reviewed and approved or refused by the supervisor. There is no automated result analysis, and the results will be available to users only after approval by the supervisor. For more information, see the section [[Peer review with moderation>>doc:||anchor="Peer review with moderation"]].
1568
1569 In any case, participants always have the option to report reviews as inappropriate to the supervisor, who will then be informed to check on these reviews separately. For more information, see the section [[Edit inappropriate review>>doc:||anchor="Edit inappropriate review"]].
1570 {{/info}}
1571 {{/expand}}
1572 )))
1573 )))
1574
1575 {{note title="Disabled feedback option"}}
1576 In the assessment tool, **authorised users** (e. g. course owners) can **view all proposed solutions and related reviews as well as feedback at any time**.
1577
1578 In contrast, **course users** can – with a disabled feedback option – see the reviews they received for their solution **only in the** **specified time frame for the overall result display**. (This also goes for reporting an inappropriate review.)
1579 {{/note}}
1580 {{/expand}}
1581 {{/layout-cell}}
1582 {{/layout-section}}
1583
1584 {{layout-section ac:type="single"}}
1585 {{layout-cell}}
1586 \\
1587 {{/layout-cell}}
1588 {{/layout-section}}
1589
1590 {{layout-section ac:type="single"}}
1591 {{layout-cell}}
1592 == Overall results to the review process ==
1593
1594 By using the **assessment tool**, authors may always access an overview of which user has been assigned which task, delivered a solution, submitted a review or provided feedback.
1595
1596 [[image:attach:Bewertungswerkzeug - Übersicht zum Peer Review_en.png]]
1597
1598 In this table, you can also view the reviews (and their statuses) given by the displayed users, or switch to the assessment view as per user.
1599
1600 {{info}}
1601 However, the assignment of usernames to solutions, reviews or feedback is only visible to authors in the assessment tool, but not to the participants in the course view, or in the dialogues for providing reviews or feedback.
1602 {{/info}}
1603
1604 === Open overview in the assessment tool ===
1605
1606 To open the status of the review process in the assessment tool, proceed as follows:
1607
1608 {{expand title="Open overview in the assessment tool ..."}}
1609 (% class="wrapped" %)
1610 |(((
1611 Go to the **assessment tool** of the desired course.
1612 )))|(((
1613 (% class="content-wrapper" %)
1614 (((
1615 [[image:attach:Bewertungswerkzeug@Kursrun - Bewertungswerkzeug öffnen_en.png]]
1616 )))
1617 )))
1618 |(((
1619 In the left menu, click on the entry **As per course structure**.
1620 )))|(((
1621 (% class="content-wrapper" %)
1622 (((
1623 [[image:attach:Bewertungswerkzeug - Nach Kursstruktur_en.png]]
1624 )))
1625 )))
1626 |(((
1627 Select the desired task course element and, if necessary, a course group.
1628 )))|(((
1629 (% class="content-wrapper" %)
1630 (((
1631 [[image:attach:Bewertungswerkzeug - Gruppenauswahl_en.png]]
1632 )))
1633 )))
1634 |(((
1635 The displayed table includes information on the reviews carried out by other participants. In addition to the names of the users who created the review, the total score and indications on the review status can be inferred. Using a link, you can display all review content together with the corresponding feedback, if any.
1636 )))|(((
1637 (% class="content-wrapper" %)
1638 (((
1639 [[image:attach:Bewertungswerkzeug - Übersicht zum Peer Review_en.png]]
1640 )))
1641 )))
1642 {{/expand}}
1643
1644 The opened table contains **information about the status of the review process of all users** of the selected group.
1645
1646 {{expand title="Information in the detailed view ..."}}
1647 (% class="wrapped" %)
1648 |(% class="numberingColumn" %)(% class="numberingColumn" %)
1649 (((
1650 1
1651 )))|(((
1652 Name of the user with a link to the detailed assessment
1653 )))|(((
1654 Click on a displayed username. The course element’s detailed assessment view opens for the selected user.
1655 )))|(% rowspan="5" %)(% rowspan="5" %)
1656 (((
1657 (% class="content-wrapper" %)
1658 (((
1659 [[image:attach:Bewertungswerkzeug - Informationen der Tabelle_en.png]]
1660 \\\\
1661 )))
1662 )))
1663 |(% class="numberingColumn" %)(% class="numberingColumn" %)
1664 (((
1665 2
1666 )))|(((
1667 Given reviews
1668 )))|(((
1669 The link on the entry opens a dialogue with the reviews submitted by the user.
1670 )))
1671 |(% class="numberingColumn" %)(% class="numberingColumn" %)
1672 (((
1673 3
1674 )))|(((
1675 (% class="content-wrapper" %)
1676 (((
1677 [[image:attach:Icon_Warnung.png]]Reported reviews
1678 )))
1679 )))|(((
1680 (% class="content-wrapper" %)
1681 (((
1682 The icon[[image:attach:Icon_Warnung.png]]indicates that at least one review of this user has been reported as inappropriate. Details will be displayed when clicking on the link.
1683 )))
1684 )))
1685 |(% class="numberingColumn" %)(% class="numberingColumn" %)
1686 (((
1687 4
1688 )))|(((
1689 (% class="content-wrapper" %)
1690 (((
1691 [[image:attach:Icon_Reviewanzahl reicht nicht aus_de.png]]Insufficient number of reviews
1692 )))
1693 )))|(((
1694 The reviews received to date for this user are below the configured minimum number of reviews. If the period for the submission of the reviews has already expired and the minimum number has not been reached, you should check the assessment of the affected user, write an expert review if necessary and adjust the assessment form.
1695 )))
1696 |(% class="numberingColumn" %)(% class="numberingColumn" %)
1697 (((
1698 5
1699 )))|(((
1700 (% class="content-wrapper" %)
1701 (((
1702 [[image:attach:Icon_Tabelle anpassen_en.png]]
1703 )))
1704 )))|(((
1705 If not all required columns are displayed, you can change the column configuration by clicking on this icon.
1706 )))
1707 {{/expand}}
1708
1709 If you instead open the **detailed assessment view** **of a user**, you will receive information about the **review process** of **that user's solution**.
1710
1711 {{expand title="Information in the detailed view ..."}}
1712 (% class="wrapped" %)
1713 |(% class="numberingColumn" %)(% class="numberingColumn" %)
1714 (((
1715 1
1716 )))|(((
1717 Selected course element
1718 )))|(% rowspan="3" %)(% rowspan="3" %)
1719 (((
1720 (% class="content-wrapper" %)
1721 (((
1722 [[image:attach:Bewertungswerkzeug - Detailansicht1_en.png]]
1723 )))
1724 )))
1725 |(% class="numberingColumn" %)(% class="numberingColumn" %)
1726 (((
1727 2
1728 )))|(((
1729 Selected user
1730 )))
1731 |(% class="numberingColumn" %)(% class="numberingColumn" %)
1732 (((
1733 3
1734 )))|(((
1735 Task and solution of the user
1736 )))
1737 |(% class="numberingColumn" %)(% class="numberingColumn" %)
1738 (((
1739 4
1740 )))|(((
1741 Reviews received and status of the reviews
1742 )))|(% rowspan="4" %)(% rowspan="4" %)
1743 (((
1744 (% class="content-wrapper" %)
1745 (((
1746 [[image:attach:Bewertungswerkzeug - Detailansicht2_en.png]]
1747 )))
1748 )))
1749 |(% class="numberingColumn" colspan="1" %)(% class="numberingColumn" colspan="1" %)
1750 (((
1751 5
1752 )))|(% colspan="1" %)(% colspan="1" %)
1753 (((
1754 Possibility to give an expert review
1755 )))
1756 |(% class="numberingColumn" colspan="1" %)(% class="numberingColumn" colspan="1" %)
1757 (((
1758 6
1759 )))|(% colspan="1" %)(% colspan="1" %)
1760 (((
1761 Assessment form with overall score
1762 )))
1763 |(% class="numberingColumn" colspan="1" %)(% class="numberingColumn" colspan="1" %)
1764 (((
1765 7
1766 )))|(% colspan="1" %)(% colspan="1" %)
1767 (((
1768 Show log file
1769 )))
1770 {{/expand}}
1771
1772 (% class="auto-cursor-target" %)
1773
1774
1775 {{id name="inappropriate"/}}
1776
1777 === Edit inappropriate review ===
1778
1779 A user has reported a review that they considered to be inappropriate. Now you have to check and accept or refuse this reported review. Depending on your choice, the review will then be included in the overall result or discarded.
1780
1781 {{expand title="How to deal with reported reviews ..."}}
1782 (% class="wrapped" %)
1783 |(((
1784 (% class="content-wrapper" %)
1785 (((
1786 [[image:attach:Icon_Gemeldet_en.png]]
1787 )))
1788 )))|(((
1789 (% class="content-wrapper" %)
1790 (((
1791 If the user has reported a review as inappropriate, the entry “Reported” will appear in the “Review status” column. Now open the detailed view of the corresponding review. In the dialogue that opens, you can make a decision about the review. Choose between** [[image:attach:Icon_Review ignorieren_en.png]]**and [[image:attach:Icon_Review akzeptieren_en.png]].
1792 )))
1793 )))
1794 |(((
1795 (% class="content-wrapper" %)
1796 (((
1797 [[image:attach:Icon_wird ignoriert_en.png]]
1798 )))
1799 )))|(((
1800 By clicking on the **Ignore review** button, you agree to the user's objection, and the review that has been reported as inappropriate will not be included in the calculation of the overall score. The review status then changes from "Reported" to **Reported (will be ignored)**. Discarding a review may lead to the number of the user’s reviews falling below the predetermined minimum number. Therefore, please check the entire assessment and adjust it if necessary, using the assessment form or by performing an expert review.
1801 )))
1802 |(((
1803 (% class="content-wrapper" %)
1804 (((
1805 [[image:attach:Icon_wird akzeptiert_en.png]]
1806 )))
1807 )))|(((
1808 By clicking on the **Accept review** button, you dismiss the user's objection, and the reported review will further be considered in the calculation of the overall score. The review status then changes from “Reported” to **Reported (will be accepted)**.
1809 )))
1810 |(((
1811 (% class="content-wrapper" %)
1812 (((
1813 [[image:attach:Icon_Expertenreview_en.png]]
1814 )))
1815 )))|(((
1816 An [[expert review>>doc:||anchor="expert review"]] has been performed and will be considered in the overall assessment.
1817 )))
1818 {{/expand}}
1819
1820 (% class="auto-cursor-target" %)
1821
1822
1823 {{id name="moderation"/}}
1824
1825 === Peer review with moderation ===
1826
1827 If you wish to accompany the review process as a course supervisor and check on the assessments before they are released to the users, you can do so by enabling the option **Only show results once the task has its performance results approved by the supervisor**. Configure this option in the course editor in the result view section.
1828
1829 If the moderation function is enabled, this means that you will need to look into each review individually and accept or refuse it. Only when you are finished, the assessment can be adopted.
1830
1831 {{expand title="Moderate assessment process ..."}}
1832 (% class="wrapped" %)
1833 |=(((
1834 Review status
1835 )))|=(((
1836 Explanation
1837 )))
1838 |(((
1839 (% class="content-wrapper" %)
1840 (((
1841 [[image:attach:Icon_Prüfung ausstehend_en.png]]
1842 )))
1843 )))|(((
1844 (% class="content-wrapper" %)
1845 (((
1846 If a moderated peer review has not yet been checked, the entry **Inspection pending** will appear in the “Review status” column. Open the detailed view of the review by clicking on the entry “Display review”, and pass your judgement by clicking on the [[image:attach:Icon_Review akzeptieren_en.png]] or [[image:attach:Icon_Review ablehnen_en.png]] button.
1847 )))
1848 )))
1849 |(((
1850 (% class="content-wrapper" %)
1851 (((
1852 [[image:attach:Icon_akzeptiert_en.png]]
1853 )))
1854 )))|(((
1855 Using the “Accept review" button, you will approve of the review, and it will be included in the overall assessment. The review status then changes from “Inspection pending” to **Accepted**.
1856 )))
1857 |(((
1858 (% class="content-wrapper" %)
1859 (((
1860 [[image:attach:Icon_abgelehnt_en.png]]
1861 )))
1862 )))|(((
1863 Using the “Refuse review” button, you will dismiss the review, and it will not be included in the calculation of the overall assessment. The review status then changes from “Inspection pending” to **Refused**.
1864
1865 Discarding a review may lead to the number of received reviews falling below the predetermined minimum number. Therefore, please check the entire assessment and adjust it if necessary, using the assessment form or by performing an [[expert review>>doc:||anchor="expert review"]].
1866 )))
1867 |(% colspan="1" %)(% colspan="1" %)
1868 (((
1869 (% class="content-wrapper" %)
1870 (((
1871 [[image:attach:Icon_Bewertung übernehmen_en.png]]
1872 )))
1873 )))|(% colspan="1" %)(% colspan="1" %)
1874 (((
1875 The **Apply review** button does not become active until all existing reviews have been viewed and accepted or refused. Clicking on the button stores and transmits the average total score of all individual reviews to the total score field of the assessment form. Depending on the configuration, this will lead to passing the course element.
1876 )))
1877 {{/expand}}
1878
1879 (% class="auto-cursor-target" %)
1880 [[image:attach:Bewertungswerkzeug - Moderation_en.png]]
1881
1882 (% class="auto-cursor-target" %)
1883
1884
1885 {{id name="expert review"/}}
1886
1887 === Create expert review ===
1888
1889 Course supervisors may create a review for a participant’s solution in the assessment tool at any time. Depending on the configuration, this may even be necessary if a participant has received too few reviews for an assessment, other participants have not given enough reviews, or there have been inappropriate reviews.
1890
1891 {{expand title="Give expert review ..."}}
1892 (% class="wrapped" %)
1893 |(((
1894 Switch to the detailed view of a user's assessment in the assessment tool.
1895 )))|(% rowspan="3" %)(% rowspan="3" %)
1896 (((
1897 (% class="content-wrapper" %)
1898 (((
1899 [[image:attach:Bewertungswerkzeug - Expertenreview starten_en.png]]
1900 )))
1901 )))
1902 |(((
1903 In the **Peer reviews received** section, you will find the **Give expert review** button right underneath the table.
1904 )))
1905 |(((
1906 Clicking on the button will open the review form, in which you can now give a review for the participant. For the expert review, you will be provided with the same form as the participants for the regular review.
1907
1908 Submit the review with **Save and close**. Your review will then receive the status or addition **expert review** in the summary table and all user views.
1909 )))
1910 {{/expand}}
1911
1912 (% class="auto-cursor-target" %)
1913
1914
1915 {{id name="minimum number"/}}
1916
1917 === Impact of falling below the minimum number ===
1918
1919 The educational goal of the assessment form “peer review” is to enable [[peer assessment>>url:https://de.wikipedia.org/wiki/Peer_Assessment||shape="rect"]]. Therefore, in drafting this form of assessment, care has been taken to ensure a great many basic scenarios. In particular, the anonymity and randomness of the allocation of participants’ solutions for assessment have been determined as a target criterion.
1920
1921 If you have **configured a** **low required number of reviews and disabled additional reviews **in the basic settings, you should consider the following to optimise the assessment procedure:
1922
1923 {{expand title="Important information for an optimal assessment procedure ..."}}
1924 * **Configure fixed, non-overlapping date restrictions**: The submission of solutions should always be limited in time to make sure it takes place prior to the review phase (access>drop box>restricted by date until). Therefore, the number of solution files available at the start of the review phase will be fixed and will not change during the review phase.
1925 * With the start of the review phase, all available reviews will be randomly distributed among all users clicking on the “Start review” button. This means that the assignment of a review only takes place when the user selects the button and is not previously determined. In other scenarios, this guarantees a very open peer review process, which also optimally integrates later solutions.
1926 * Reducing the minimum number to 1 will result in each user receiving a review of their solution after all of the reviews have been completed.
1927 * [[image:attach:Icon_Warnung.png]]Only **the last reviewer might not receive a peer review of their solution**; in return, at most, one other user will receive two reviews. However, even with this configuration, it is almost impossible for more than one user to receive more than two reviews and becomes even less likely with an increasing number of users.
1928 *
1929 * {{expand title="Excursion into odd review numbers ..."}}The problem arises from "successively drawing" the reviews. This approach was chosen to guarantee above all an equal distribution when there are multiple reviews, enabling the best possible anonymity and random distribution (even for later solutions).
1930
1931 However, if there are only three users (A, B, C) left, the following assignment may occur:  (A:B means user A picks user B's solution for review and performs the review)
1932 A:B; B:C; C:A => All users have received and performed a review
1933 A:C; B:A; C:B => All users have received and performed a review
1934 A:B; B:A; C:? => In this case, C will randomly receive and review the solution of either A or B. Therefore, user A or B will receive two reviews and the previously mentioned expert review will become necessary for user C’s solution. However, if the option "Allow additional reviews" is enabled, the next respective review will be assigned to a user who has already given a review. Thus C will also receive a peer review.{{/expand}}If the exception described above occurs, you must perform an [[expert review>>doc:||anchor="expert review"]]for this user. To further minimise the chances for such a case, you may allow the assignment of additional reviews.
1935 {{/expand}}
1936 {{/layout-cell}}
1937 {{/layout-section}}
1938 {{/layout}}
1939 {{/sv-translation}}