Zum Inhalt springen

Wiki-Quellcode von Ergebniseinsicht

Version 326.1 von Carina Enke am 16.10.2018
Verstecke letzte Bearbeiter
Carina Enke 136.1 1 {{sv-translation language="de"}}
2 {{layout}}
3 {{layout-section ac:type="single"}}
4 {{layout-cell}}
Carina Enke 310.1 5
6
7 (% class="removedPlaceholderWrapper" %)
8
9
Carina Enke 296.1 10
Carina Enke 136.1 11
Carina Enke 296.1 12
Carina Enke 136.1 13 {{/layout-cell}}
14 {{/layout-section}}
15
16 {{layout-section ac:type="single"}}
17 {{layout-cell}}
18 {{scroll-ignore}}
19 {{panel borderColor="#ddd" bgColor="#f0f0f0" borderStyle="solid" title="Inhalt"}}
20
21
22 {{toc/}}
23 {{/panel}}
24 {{/scroll-ignore}}
Carina Enke 188.1 25
Carina Enke 296.1 26
Carina Enke 188.1 27
Carina Enke 296.1 28
Carina Enke 136.1 29 {{/layout-cell}}
30 {{/layout-section}}
31
32 {{layout-section ac:type="single"}}
33 {{layout-cell}}
34 == Ergebniseinsicht für den Teilnehmer ==
35
36 Der Teilnehmer kann, insofern es vom Betreuer freigegeben wurde, seine Testergebnisse und ggf. -bewertungen nach dem Testdurchlauf einsehen. In OPAL kann die Freigabe der Ergebniseinsicht für Teilnehmer auch datums-, gruppen- oder bewertungsabhängig erfolgen.
37
Carina Enke 326.1 38 [[image:attach:Teilnehmerauswertung.png]][[image:attach:Teilnehmerauswertung_Aufgabendetails.png]]
Carina Enke 136.1 39
Carina Enke 326.1 40 Neben einer abschließenden Ergebniseinsicht, können dem Teilnehmer auch während des Testdurchführung Auswertungsdaten freigeschalten werden. Entsprechend dem gewünschten Szenario können mit Hilfe der [[Testkonfiguration>>doc:Konfiguration der Testdurchfuehrung]], neben individuellen Feedbackinhalten bspw. die Punkte, die Richtig/Falsch-Anzeige sowie die korrekte Lösung sichtbar geschalten werden.
Carina Enke 136.1 41
42 == Ergebniseinsicht für den Betreuer ==
43
Carina Enke 326.1 44 Für Test- und Prüfungsszenarien kann der Betreuer eine übersichtliche Gesamtauswertung für alle Teilnehmer, sowie die detaillierten Ergebniseinsicht für den einzelnen Teilnehmer einsehen. Darüber hinaus ist eine Bewertungsfunktion integriert, welche die Nachkorrektur und für offene Fragenformate (u.a. Freitext und Upload) die manuelle Bewertung ermöglicht.
Carina Enke 136.1 45
Carina Enke 326.1 46 [[image:attach:Gesamtauswertung.png]]
Carina Enke 136.1 47
48 === Teilnehmer-Kommentare einsehen ===
49
50 In den Ergebniseinsichten sind die Kommentare einsehbar, welche durch den Teilnehmer während des Testdurchlaufs für einzelne Aufgaben eingegeben wurden. Die Kommentarfunktion für den Teilnehmer ist konfigurierbar.
51
Carina Enke 326.1 52 [[image:attach:Kommentarfunktion2.png]]
Carina Enke 136.1 53
Carina Enke 326.1 54 [[image:attach:Kommentarfunktion.png]]
Carina Enke 136.1 55
Carina Enke 296.1 56
Carina Enke 136.1 57
58 === Variablen-Belegung einsehen ===
59
60 {{id name="Variablen-Belegung"/}}
61
62 Wurden in den Aufgabeninhalten (% class="confluence-link" %)[[Variablen verwendet>>doc:Variablen verwenden]],(%%) kann für den jeweiligen Testdurchlauf des Teilnehmers die Variablenbelegung eingesehen werden. Dies ermöglicht für den Betreuer und Bewerter eine detaillierte Aufgaben- und Auswertungsanalyse.
63 Die Anzeige kann zur verbesserten Übersicht ein- und ausgeklappt werden.
64
Carina Enke 326.1 65 [[image:attach:image2016-4-25 9:47:31.png]]
Carina Enke 136.1 66
67 Es werden alle Variablen angezeigt, die durch den Autor definiert wurden. Die Ansicht entspricht der Anzeige und Definition im ONYX Editor. Es wird der Variablenname, der Typ der Variable und der für den jeweiligen Testdurchlauf des Teilnehmers ermittelte Variablen-Wert angezeigt.
68
69 === MAXIMA-Ausgaben einsehen ===
70
71 {{id name="MAXIMA-Ausgaben"/}}
72
Carina Enke 326.1 73 Wurde MAXIMA für die Berechnungen für (% class="confluence-link" %)Variablen[[ >>doc:Variablen verwenden]](%%)oder für [[Formelvergleiche >>doc:Formelvergleich]]genutzt, können für den jeweiligen Testdurchlauf des Teilnehmers alle MAXIMA-Ausgaben eingesehen werden. Dies ermöglicht für den Betreuer und Bewerter eine detaillierte Aufgaben- und Auswertungsanalyse.
Carina Enke 136.1 74 Die Anzeige kann zur verbesserten Übersicht ein- und ausgeklappt werden.
75
Carina Enke 326.1 76 [[image:attach:image2016-4-25 9:56:41.png]]
Carina Enke 136.1 77
78 Es werden alle MAXIMA-Ausgaben angezeigt. Folgende Angaben können aus den MAXIMA-Ausgaben entnommen werden:
79
Carina Enke 326.1 80 |(((
Carina Enke 136.1 81 Zeitstempel
82 )))|(((
83 Der Zeitstempel gibt an, zu welcher Zeit die MAXIMA-Ausgabe erzeugt wurde.
84 )))
Carina Enke 326.1 85 |(((
Carina Enke 136.1 86 Art der Ausgabe
87 )))|(((
88 Mit der Kennzeichnung INFO / ERROR ist ersichtlich, um welche Art von MAXIMA-Ausgabe es sich handelt. MAXIMA-Fehler sind farblich markiert, um eine schnelle Problem-Analyse zu ermöglichen.
89 )))
Carina Enke 326.1 90 |(((
Carina Enke 136.1 91 Aufgabenprozess
92 )))|(((
93 Mit der Kennzeichnung TP / RP ist ersichtlich, in welchem Aufgabenschritt die MAXIMA-Ausgabe erzeugt wurde.
94
95 * TP (Template Processing): Während der Aufgaben-Initialisierung inkl. der Variablen-Belegung.
96 * RP (Response Processing): Während der Aufgaben-Auswertung auf Basis der Teilnehmerantworten.
97 )))
Carina Enke 326.1 98 |(((
Carina Enke 136.1 99 Angaben zum ausführenden
100 MAXIMA-Prozess
101 )))|(((
Carina Enke 326.1 102 Für jede MAXIMA-Ausgabe kann eingesehen werden, durch welchen MAXIMA-Thread die Anfrage bearbeitet wurde und durch Ausgabe der Nummer, um die wievielte Anfrage an diesen Thread es sich gehandelt hat.
103 ONYX erzeugt für die Verarbeitung von MAXIMA-Anfragen einen Pool aus MAXIMA-Prozessen (Threads). Jeder MAXIMA Prozess verarbeitet eine definierte Anzahl von MAXIMA-Anfragen, bevor der Thread neu initialisiert wird. Alle Anfragen werden mindestens an zwei MAXIMA-Prozesse gestellt. Kommt es zu abweichende Rückmeldungen, werden die Prozesse neu initialisiert und die MAXIMA Anfrage ein zweites Mal erneut gestellt.
Carina Enke 136.1 104 )))
Carina Enke 326.1 105 |(((
Carina Enke 136.1 106 Bearbeitungszeit
107 )))|(((
108 Die Bearbeitungszeit gibt an, wie lange die Bearbeitung der Anfrage in MAXIMA und wie lange die Anfrage in ONYX insgesamt benötigt hat. Die Angabe erfolgt in Millisekunden (ms).
109 )))
Carina Enke 326.1 110 |(((
Carina Enke 136.1 111 MAXIMA-Anfrage
112 )))|(((
113 Für jede MAXIMA-Ausgabe wird der an MAXIMA übermittelte Ausdruck angezeigt.
114 )))
Carina Enke 326.1 115 |(% colspan="1" %)(% colspan="1" %)
Carina Enke 136.1 116 (((
117 MAXIMA-Rückgabe
118 )))|(% colspan="1" %)(% colspan="1" %)
119 (((
120 Für jede MAXIMA-Ausgabe wird der von MAXIMA zurückgegebene Wert angezeigt. Entsprechend des notwendigen Datentyps wird dieser Rückgabewert von ONYX ggf. verarbeitet. So wird beispielsweise für einen einfachen Formelvergleich (Richtig/Falsch) ein boolescher Rückgabewert erwartet und die MAXIMA-Rückgabe entsprechend verarbeitet.
121 )))
122
123 {{info}}
124 Nutzen Sie für Formelvergleiche die [[Validierungsoption >>url:https://www.bps-system.de/help/display/ONYX/Formelvergleich#Formelvergleich-Schritt3:Formel%C3%BCberpr%C3%BCfungaktivieren%28optional%29||shape="rect"]]für den Test-Teilnehmer. Auf diese Weise vermeiden Sie Syntax-Fehler in den Teilnehmer-Eingaben.
125 {{/info}}
126
127 === Anzeige von Systemfehlern ===
128
129 Für die Auswertung der Teilnehmer-Antwort können in verschiedenen Aufgabenformaten externe Programme (bspw. MAXIMA für (% class="confluence-link" %)Variablen[[ >>doc:Variablen verwenden]](%%)oder für [[Formelvergleiche>>doc:Formelvergleich]]; Pattern-Bibliothek für [[Reguläre Ausdrücke>>doc:Regulaere Ausdruecke]]) genutzt werden. Liefern externe Programme keine Antwort, wird eine entsprechende Warnung zur Prüfung der Auswertung angezeigt. Die Warnmeldung wird in allen Bewertungs- und Ergebniseinsichten angezeigt.
130
Carina Enke 326.1 131 [[image:attach:image2016-4-25 10:56:27.png]]
Carina Enke 136.1 132
Carina Enke 326.1 133 Als Betreuer können Sie auf diese Weise von der Gesamtauswertung direkt zu betroffenen Teilnehmern und der betroffenen Aufgabe springen. In den Bewertungsansichten können Sie die angezeigte Aufgabe, sowie die eingegebene Teilnehmerantwort nachvollziehen und wenn notwendig eine [[Manuelle Nachbewertung>>doc:Manuelle Bewertung]] vornehmen.
Carina Enke 136.1 134
Carina Enke 326.1 135 [[image:attach:image2016-4-25 11:7:39.png]]
Carina Enke 136.1 136
137 Für die betroffene Aufgabe wird eine detaillierte Fehlermeldung angezeigt.
138
Carina Enke 326.1 139 [[image:attach:image2016-4-25 11:18:10.png]]
Carina Enke 136.1 140
Carina Enke 296.1 141
Carina Enke 136.1 142
143 {{info}}
144 Ein TimeOut-Fehler in externen Programmen kann verschiedene Ursachen haben. Folgende Ursachen sind beispielsweise möglich:
145
146 * Langlaufende (fehlerhafte) Systemanfrage: Das externe System kann die Anfrage innerhalb der TimeOut-Zeit nicht verarbeiten.
147 * Performance-Engpass: Das externe System reagiert innerhalb der TimeOut-Zeit nicht, ggf. da das System durch andere Anfragen ausgelastet ist.
148 * Fehler im Systembetrieb: Das externe System ist aktuell nicht erreichbar.
149 {{/info}}
150
151 === Anzeige bei abgebrochenen und unterbrochenen Testversuchen ===
152
Carina Enke 326.1 153 Mit dem Zustand "**Aufgabe wurde nicht abgegeben**" werden in den Bewertungsansichten Einzelaufgaben von nicht korrekt abgeschlossenen Testversuchen gekennzeichnet, wenn diese Aufgaben vom Teilnehmer zwar beantwortet, aber nicht abgegeben wurden.
Carina Enke 136.1 154
155 Diese Aufgaben erhalten eine vorläufige Bewertung.
156
Carina Enke 326.1 157 (% class="cp-title active" %) [[image:attach:Auswertung - Aufgabe nicht abgegeben_de.png]]
Carina Enke 136.1 158
Carina Enke 296.1 159
Carina Enke 136.1 160 {{/layout-cell}}
161 {{/layout-section}}
162 {{/layout}}
163 {{/sv-translation}}
164
165 {{sv-translation language="en"}}
166 {{layout}}
167 {{layout-section ac:type="single"}}
168 {{layout-cell}}
169 {{scroll-ignore}}
170 {{panel title="Content"}}
171
172
173 {{toc/}}
174 {{/panel}}
175 {{/scroll-ignore}}
176 {{/layout-cell}}
177 {{/layout-section}}
178
179 {{layout-section ac:type="single"}}
180 {{layout-cell}}
181 == Results view for participants ==
182
Carina Enke 326.1 183 Participants can access their test results and assessments after the test procedure, provided that this function has been enabled by the tutor. In OPAL, the release of the test results for participants may also be date-, group-, or assessment-dependent.
Carina Enke 136.1 184
Carina Enke 326.1 185 [[image:attach:Teilnehmerauswertung.png]]
Carina Enke 136.1 186
Carina Enke 326.1 187 [[image:attach:Teilnehmerauswertung_Aufgabendetails.png]]
Carina Enke 136.1 188
Carina Enke 326.1 189 In addition to the final result, it is also possible to release assessment information to the participants already during the test execution. Depending on the desired scenario, it is further possible to show scores, the right/wrong display, as well as the correct solution and individual feedback content by means of the [[Test Configuration>>url:https://www.bps-system.de/help/display/ONYXintern/.Konfiguration+der+Testdurchfuehrung+v1.11||shape="rect"]].
190
Carina Enke 136.1 191 == Results view for tutors ==
192
Carina Enke 326.1 193 For test and examination scenarios, the tutor can view both the overall assessment of all participants and the detailed results of individual participants. Moreover, an assessment function has been integrated, which enables the reassessment of tests as well as the manual assessment of open question formats (including free text and upload).
Carina Enke 136.1 194
Carina Enke 326.1 195 [[image:attach:Gesamtauswertung.png]]
Carina Enke 136.1 196
Carina Enke 326.1 197 === View participant comments ===
Carina Enke 136.1 198
Carina Enke 326.1 199 The results views may include comments, which were entered by the participant for individual tasks during the test procedure. The comment function for participants is configurable.
Carina Enke 136.1 200
Carina Enke 326.1 201 [[image:attach:Kommentarfunktion2.png]]
Carina Enke 136.1 202
Carina Enke 326.1 203 [[image:attach:Kommentarfunktion.png]]
Carina Enke 136.1 204
Carina Enke 326.1 205 === View variable assignment  ===
Carina Enke 136.1 206
207 {{id name="Variable assignment"/}}
208
209 If [[variables were used>>url:https://www.bps-system.de/help/display/ONYXintern/.Variablen+verwenden+v1.11||shape="rect"]] in the task content, it is possible to view the variable assignment for the corresponding test run of the participant. This allows for a more detailed task and assessment analysis on the part of the tutor or assessor.
210
211 For reasons of clarity, the display can be expanded and collapsed.
212
Carina Enke 326.1 213 [[image:attach:image2016-4-25 9:47:31.png]]
Carina Enke 136.1 214
Carina Enke 326.1 215 All variables are shown which have been defined by the author. The view corresponds to the display and definition in ONYX Editor. In total, the name of the variable, the type of the variable, and the variable value, which was determined for the respective test procedure of the participant, are displayed.
Carina Enke 136.1 216
217 === View MAXIMA outputs ===
218
219 {{id name="View MAXIMA outputs"/}}
220
Carina Enke 326.1 221 If MAXIMA was used for the calculation of [[variables>>url:https://www.bps-system.de/help/display/ONYXintern/.Variablen+verwenden+v1.11||style="font-size: 14.0px;" shape="rect"]](% style="font-size: 14.0px;" %) or for (%%)[[formula comparisons>>url:https://www.bps-system.de/help/display/ONYXintern/.Formelvergleich+v1.11||style="font-size: 14.0px;" shape="rect"]](% style="font-size: 14.0px;" %), it is possible to view all MAXIMA outputs related to the corresponding test run of the participant. This allows for a more detailed task and assessment analysis on the part of the tutor or assessor.
Carina Enke 136.1 222
223 For reasons of clarity, the display can be expanded and collapsed.
224
Carina Enke 326.1 225 [[image:attach:image2016-4-25 9:56:41.png]]
Carina Enke 136.1 226
227 All MAXIMA outputs will be displayed. The following information can be inferred from the MAXIMA outputs:
228
229 |(((
230 (% class="TableParagraph" %)
231 **Time Stamp**
232 )))|(((
233 (% class="TableParagraph" %)
Carina Enke 326.1 234 The time stamp indicates the time at which the MAXIMA output was created.
Carina Enke 136.1 235 )))
236 |(((
237 (% class="TableParagraph" %)
238 **Output type**
239 )))|(((
240 (% class="TableParagraph" %)
Carina Enke 326.1 241 Due to the marking INFO / ERROR, the type of the MAXIMA output becomes immediately apparent. MAXIMA errors are colour-coded to enable a fast problem analysis.
Carina Enke 136.1 242 )))
243 |(((
244 (% class="TableParagraph" %)
245 **Task process**
246 )))|(((
247 (% class="TableParagraph" %)
Carina Enke 326.1 248 Due to the marking TP / RP, it becomes immediately apparent during which task step the MAXIMA output was created.
Carina Enke 136.1 249
250 * TP (template processing): During the task initialisation including the variable assignment.
251 * RP (response processing): During the task assessment on the basis of the participants' responses.
252 )))
253 |(((
254 (% class="TableParagraph" %)
255 **Information on the executing MAXIMA process**
256 )))|(((
257 (% class="TableParagraph" %)
258 Each MAXIMA output contains a number, which reveals how often the thread has been requested before as well as information on the MAXIMA thread through which the request has been processed.
259
260 ONYX creates a pool of MAXIMA processes (threads) for the processing of MAXIMA requests. Each MAXIMA process processes a defined number of MAXIMA requests before the thread is re-initialised. All requests will be submitted to at least two MAXIMA processes. If it comes to deviating feedback, the processes will be re-initialised and the MAXIMA request will be submitted again.
261 )))
262 |(% colspan="1" %)(% colspan="1" %)
263 (((
264 (% class="TableParagraph" %)
265 **Processing time**
266 )))|(% colspan="1" %)(% colspan="1" %)
267 (((
268 (% class="TableParagraph" %)
269 The processing time indicates how long the processing of the request took in MAXIMA, and how long the request took in ONYX. The value is in milliseconds (ms).
270 )))
271 |(% colspan="1" %)(% colspan="1" %)
272 (((
273 (% class="TableParagraph" %)
274 **MAXIMA request**
275 )))|(% colspan="1" %)(% colspan="1" %)
276 (((
277 (% class="TableParagraph" %)
278 For each MAXIMA output, the expression submitted to MAXIMA is displayed.
279 )))
280 |(% colspan="1" %)(% colspan="1" %)
281 (((
282 (% class="TableParagraph" %)
283 **MAXIMA return**
284 )))|(% colspan="1" %)(% colspan="1" %)
285 (((
286 For each MAXIMA output, the value returned by MAXIMA is displayed. Depending on the required data type, this return value will be processed by ONYX as the circumstances require. For a simple formula comparison (right/wrong), for example, a Boolean return value is expected, and the MAXIMA return is processed accordingly.
287 )))
288
289 {{info}}
290 To enable the use of formula comparisons, activate the [[validation option>>url:https://www.bps-system.de/help/display/ONYX/Formelvergleich#Formelvergleich-Schritt3:Formelüberprüfungaktivieren(optional)||shape="rect"]]. In this way, you avoid syntax errors in the entries of the participants.
291 {{/info}}
292
Carina Enke 326.1 293 === Display of system errors ===
Carina Enke 136.1 294
Carina Enke 326.1 295 In various task formats, external programmes can be used to assess the participant's answers (e.g. MAXIMA for [[variables>>url:https://www.bps-system.de/help/display/ONYXintern/.Variablen+verwenden+v1.11||shape="rect"]] or for [[formula comparisons>>url:https://www.bps-system.de/help/display/ONYXintern/.Formelvergleich+v1.11||shape="rect"]]; pattern library for [[regular expressions>>url:https://www.bps-system.de/help/display/ONYXintern/.Regulaere+Ausdruecke+v1.11||shape="rect"]]). If external programmes provide no answer, a corresponding warning will appear indicating that the assessment needs to be checked. The warning will be shown in all assessment and result views.
Carina Enke 136.1 296
Carina Enke 326.1 297 [[image:attach:image2016-4-25 10:56:27.png]]
Carina Enke 136.1 298
299 As a tutor, you can directly jump from the overall assessment to the participants and tasks concerned. In the assessment views, you can inspect the displayed task as well as the answer entered by the participant and if necessary perform a [[manual reassessment>>url:https://www.bps-system.de/help/display/ONYXintern/.Manuelle+Bewertung+v1.6||shape="rect"]].
300
Carina Enke 326.1 301 [[image:attach:image2016-4-25 11:7:39.png]]
Carina Enke 136.1 302
303 A detailed error message will be displayed for the affected task.
304
Carina Enke 326.1 305 [[image:attach:image2016-4-25 11:18:10.png]]
Carina Enke 136.1 306
307 {{info}}
308 A timeout error in external programmes can have various causes such as:
309
310 * Long-running (corrupt) system request: The external system cannot process the request within the given time limit.
311 * Performance bottleneck: The external system has not responded within the given timeframe, possibly because it is busy with other requests.
312 * Error during system operation: The external system is currently not available.
313 {{/info}}
314 {{/layout-cell}}
315 {{/layout-section}}
316 {{/layout}}
317 {{/sv-translation}}