Bewertungswerkzeug

\\

6

7

[[image:attach:Icon_Bewertungswerkzeug.png]]

12

13

Kursverantwortliche und Betreuer können über das **Bewertungswerkzeug** Leistungen der Kursteilnehmer bewerten, Punkte vergeben oder jedem Lernenden einen persönlichen Kommentar schreiben. Im Bewertungswerkzeug können Sie die Bewertung aller bewertbaren Bausteine einsehen bzw. die Bewertung nachträglich anpassen.

{{includeplus spaceKey="LMS" scrollPageId="8AC9158F0162490A99809532725035D5"/}}

[[image:attach:Kursrun - Überblick Bewertungswerkzeug_de.png]]

36

37

38

Bewertungen können **ausschließlich für Kursteilnehmer** vorgenommen werden, **die in eine **oder mehrere** Lerngruppen eingetragen** sind.

39

40

Führt man einen Test durch, ohne einer Lerngruppe zugehörig zu sein, werden keine Bewertungsdaten im Bewertungswerkzeug angezeigt.

== Bewertungswerkzeug öffnen ==

48

49

{{includeplus spaceKey="LMS" scrollPageId="7F00000101752C4EF27ACAB4248169F5"/}}\\

50

51

== Mögliche Bewertungsansichten ==

52

53

Das Bewertungswerkzeug bietet verschiedene Datenzusammenstellungen in unterschiedlichen Bewertungsansichten.

54

55

Starten Sie die Bewertung mit der für Ihr Szenario passenden Ansicht:

56

57

[[image:attach:Kursrun - Bewertungsansicht_de.png]]

58

59

(% class="wrapped" %)

|=(((

Bewertungsansicht

)))|=(((

Beschreibung

)))

|(((

==== (% class="confluence-link" %)Nach Gruppen(%%) ====

67

)))|(((

68

Hier finden Sie alle von Ihnen betreuten Kursgruppen. Nachdem Sie eine Gruppe gewählt haben, können Sie den Kursbaustein auswählen, den Sie bewerten möchten und anschließend die Bewertung durchführen.

69

)))

70

|(((

71

==== (% class="confluence-link" %)Nach Kursstruktur(%%) ====

72

)))|(((

73

(% class="content-wrapper" %)

74

(((

75

Sie wählen aus der Übersicht aller bewertbaren Kursbausteine zunächst den betreffenden Baustein aus, anschließend die Gruppe sowie den Benutzer, den Sie bewerten möchten.

76

77

Bei ONYX-Ressourcen haben Sie an dieser Stelle zusätzliche Möglichkeiten. Sie können sich beispielsweise die **[[statistische Auswertung>>doc:ONYX.Statistische Auswertung]]** anzeigen lassen oder eine **anonyme Bewertung[[doc:Bewertung von Testresultaten]]** ohne Angabe der Nutzernamen durchführen.

78

79

80

Diese Optionen sind erst zu sehen, wenn für den gewählten Kursbaustein Nutzerergebnisse vorliegen.

81

82

* **Gesamtauswertung:** Der Link //**Anzeigen** //öffnet eine Übersicht aller Resultate mit den durchschnittlich erreichten Punkten und dem durchschnittlichen Bestandenstatus sowie eine Liste mit den Ergebnissen der Kursteilnehmer.

83

* **Antworten:** Der Link// **Bewerten** //führt zu einer Übersicht aller Resultate sowie einer Liste der enthaltenen Testfragen. Der Bewerter sieht welche Bewertungen bereits automatisch erfolgt sind und ob noch manuelle Bewertungen notwendig sind (blaues M-Symbol). Zusätzlich werden statistische Werte der bisherigen Antworten angezeigt. Der Bewerter kann jede Aufgabe durch Klick auf den Aufgabentitel auswählen und diese manuell (nach-) bewerten. Ausführliche Informationen bietet die Seite [[doc:Bewertung von Testresultaten]]. Dort wird auch beschrieben, wie eine manuelle (nutzerbezogene oder anonyme) Testbewertung durchgeführt wird.

84

85

86

{{info title="Zusätzliche Optionen für ONYX-Tests und ONYX-Fragebögen"}}

87

**[[Statistical Evaluation>>doc:ONYX.Statistische Auswertung]]:** Sobald Ergebnisse für den Kursbaustein Test, Selbsttest oder Fragebogen vorliegen, können Sie sich eine anonymisierte statistische Auswertung dieser Ergebnisse anzeigen lassen. Der Link //**Anzeigen**// führt zu einer Übersicht aller Resultate sowie einer Liste der enthaltenen Testfragen und den zugehörigen statistischen Werten. Der Link im Aufgabentitel führt zur Detailansicht der Aufgabe.

88

89

Hinweis: Ein Fragebogen kann nur **einmal** und nur durch **registrierte** Nutzer durchgeführt werden.

)))

)))

|(((

==== (% class="confluence-link" %)Nach Benutzer(%%) ====

95

)))|(((

96

(% class="content-wrapper" %)

97

(((

98

Sie wählen zunächst aus der Liste aller Kursteilnehmer den gewünschten Nutzer aus und anschließend, aus der Liste aller Kursbausteine, den zu bewertenden Baustein.

99

100

101

Hier können Sie alle Kursteilnehmer unabhängig von vorhandenen Zugangs- und Sichtbarkeitsregeln oder im System vorliegenden Ergebnissen bewerten.

)))

)))

== Manuelle Bewertung eines Teilnehmers ==

107

108

Zur Bewertung eines Teilnehmers wird ein **Bewertungsformular** angezeigt. **Dieses Formular ist je Kursbaustein konfigurierbar**. Die entsprechend verfügbaren Konfigurationsoptionen werden auf der Seite des betreffenden Kursbausteins erläutert.

109

110

Um eine (einzelne) manuelle Bewertung eines Teilnehmers vorzunehmen, gehen Sie wie folgt vor:

111

112

(% class="wrapped" data-snooker-col-series="numbers" data-snooker-locked-cols="0" %)

113

|(% class="numberingColumn" contenteditable="false" data-mce-resize="false" %)(% class="numberingColumn" contenteditable="false" data-mce-resize="false" %)

(((

1

)))|(((

Öffnen Sie die Detailansicht der Bewertung eines Teilnehmers.

118

)))|(% rowspan="4" %)(% rowspan="4" %)

119

(((

120

(% class="content-wrapper" %)

121

(((

122

[[image:attach:Kursrun - Bewertungsformular_de.png]]

123

)))

124

)))

125

|(% class="numberingColumn" contenteditable="false" data-mce-resize="false" %)(% class="numberingColumn" contenteditable="false" data-mce-resize="false" %)

(((

2

)))|(((

Je nach Kursbaustein sehen Sie das vorkonfigurierte **Bewertungsformular**. Welche Konfigurationsoptionen die einzelnen Kursbausteine bieten, erfahren Sie auf den Seiten der betreffenden [[doc:Kursbausteine]].

130

)))

131

|(% class="numberingColumn" contenteditable="false" data-mce-resize="false" %)(% class="numberingColumn" contenteditable="false" data-mce-resize="false" %)

(((

3

)))|(((

Tragen Sie die fehlenden Bewertungsdaten ein (bspw. die Anzahl der **erreichten Punkte**, eine **Note**,** **einen** Kommentar**).

136

)))

137

|(% class="numberingColumn" contenteditable="false" data-mce-resize="false" %)(% class="numberingColumn" contenteditable="false" data-mce-resize="false" %)

138

(((

139

4

140

)))|(% colspan="1" %)(% colspan="1" %)

141

(((

142

Bestätigen Sie Ihre Angaben mit Klick auf **Speichern**.

)))

Wenn Sie bei einem automatisch vergebenen Gesamtpunktwert eine manuelle Änderung der Punktzahl in diesem Bewertungsformular vornehmen, kann dies zu Unstimmigkeiten in der Onyx-Testauswertung sowie der Auswertung in der Lernplattform führen und möglicherweise Ihre Nutzer verwirren. Sind Änderungen an der Bewertung notwendig, so führen Sie diese direkt in der Testauswertung durch. Ausführlich beschrieben wird dieser Vorgang auf der Seite [[doc:Bewertung von Testresultaten]].(% style="color: rgb(51,51,51);" %)

(% class="onyx_passed_warning" %)Um mehrere Nutzer zu bewerten, können Sie die Sammelfunktion [[Massenbewertung >>doc:||anchor="massenbewertung"]]nutzen oder - speziell für ONYX-Tests - den Weg **Kursstruktur>Bewerten,** um die Bewertung der Antworten aller Nutzer nacheinander für die gleiche Aufgabe vorzunehmen.

151

152

153

== Weitere Funktionen im Bewertungswerkzeug ==

154

155

Im Bewertungswerkzeug stehen Ihnen weitere Sammelfunktionen zur Verfügung:

156

157

(% class="wrapped" %)

|=(((

Funktion

)))|=(((

Beschreibung

)))

|(((

**Notenschlüssel erstellen**

165

)))|(((

166

(% class="content-wrapper" %)

167

(((

168

Vergeben Sie Noten mithilfe eines Assistenten für** bereits vorliegende Nutzerergebnisse** ausgewählter Lerngruppen. Im ersten Schritt des Assistenten erstellen Sie eine Übersicht, bei welcher Punktzahl welche Note vergeben werden soll. In einer Vorschau wird Ihnen nun die Verteilung der zu erwartenden Noten angezeigt. Sie können anschließend die Punktebereiche anpassen und damit die Notenverteilung steuern. Das System übernimmt dann im nächsten Schritt die automatische Vergabe der Noten anhand dieses Notenschlüssels. Im letzten Schritt können Sie eine Gesamtübersicht der vergebenen Noten bequem als Datei herunterladen.

169

170

171

Die Bewertungsfunktion **Notenschlüssel** kann nur für bereits vorhandene Testergebnisse genutzt werden. Wir empfehlen Ihnen deshalb diese Bewertungsfunktion erst zu verwenden nachdem alle Ergebnisse vorliegen.

172

173

174

Eine automatische Vergabe einer Note anhand eines bereits vorher feststehenden Notenschlüssels ist mit dieser Funktion nicht möglich.

175

)))

176

)))

177

|(% colspan="1" %)(% colspan="1" %)

178

(((

179

**Zertifikate-Download**

180

)))|(% colspan="1" %)(% colspan="1" %)

181

(((

182

Der Assistent unterstützt Sie beim Download aller vorhandenen Zertifikate zum Kurs. Sie können dabei nach Gruppen und Kursbausteinen filtern.

)))

|(((

**Massenbewertung**

)))|(((

Mit der Massenbewertung können Sie mehrere Kursteilnehmer gleichzeitig bewerten. Diese Art der Bewertung ist nur verfügbar, wenn bewertbare Kursbausteine vorhanden sind. Weitere Informationen enthält sie Seite [[doc:Massenbewertung]].

188

)))

189

|(((

190

**Teilnehmerergebnisse**

191

)))|(((

192

Mithilfe eines Assistenten wählen Sie Kursbaustein, Gruppe, Exportformat und zu exportierende Nutzerattribute aus. Die erstellte Liste können Sie anschließend als Datei herunterladen und speichern. Eine genaue Schrittfolge enthält die Seite [[doc:Teilnehmerergebnisse exportieren]].

193

)))

194

|(% colspan="1" %)(% colspan="1" %)

195

(((

196

**Teilnehmerantwort verifizieren**

197

)))|(% colspan="1" %)(% colspan="1" %)

198

(((

199

Ziel der Verifikation ist die Bestätigung, dass die gewählte HTML-Datei der Prüfungseinsichtseite nicht nachträglich manipuliert wurde. Dazu wird mit Testabschluss erzeugte technische Prüfsumme mit dem in der vorliegenden HTML-Seite enthaltenen Wert verglichen. Weitere Informationen bietet die Seite [[doc:Teilnehmerantwort verifizieren]].\\

)))

\\

\\

== Änderungsverlauf einer Bewertung ==

214

215

In der Detailansicht der Bewertung eines Nutzers ist ein Verlaufslog einsehbar. Hier werden zentrale Änderungen an Ergebnissen oder durchgeführten Bewertungen aufgelistet.

\\

\\

Um den Änderugsverlauf einzusehen, öffnen Sie das Bewertungswerkzeug und Navigieren über den Eintrag **Nach Benutzer** zur Detailansicht der Bewertung eines Nutzers. Unter dem Bewertungsformular finden Sie einen Button **Änderungsverlauf**.

[[image:attach:Bewertungswerkzeug - Änderungsverlauf_de.png]]

Mit Klick auf den Button öffnet sich der Abschnitt und listet die gespeicherten Einträge auf.

236

237

Zum Schließen des Bereiches nutzen Sie den Button **Änderungsverlauf ausblenden**.

\\

[[image:attach:Bewertungswerkzeug - Änderungsverlauf geöffnet_de.png]]

[[image:attach:Icons@Icon_Bewertungswerkzeug.png]] Course owners and supervisors can use the **assessment tool** to assess user accomplishments, award points or address personal comments to learners. It allows them to view the assessment of all assessable course elements and make changes to existing assessments.

254

255

{{expand title="The following course elements can be assessed ..."}}

256

257

258

{{includeplus spaceKey="LMS" scrollPageId="8AC9158F0162490A99809532725035D5"/}}

[[image:attach:Kursrun - Bewertungsansicht_en.png]]

276

277

278

Assessments can only be performed for users **enrolled in one or more learning groups**.

279

280

Assessment data of users who do not belong to a learning group will not be displayed in the assessment tool.

== Open assessment tool ==

{{includeplus spaceKey="LMS" scrollPageId="7F00000101752C4EF27ACAB4248169F5"/}}

292

293

== Possible assessment views ==

294

295

The assessment tool provides various data compilations in different assessment views.

296

297

Start the assessment with the appropriate view for your scenario:

298

299

(% class="wrapped" %)

|=(((

Assessment view

)))|=(((

Description

)))

|(((

**As per group**

)))|(((

Here you will find an overview of all the course groups you are supervising. After choosing a group, you can select the course element you want to assess and proceed with the assessment.

309

)))

310

|(((

311

**As per course structure**

312

)))|(((

313

(% class="content-wrapper" %)

314

(((

315

(% class="TableParagraph" %)

316

From the overview of all assessable course elements, first select the relevant course element, then the group and finally, the user you want to assess.

317

318

(% class="TableParagraph" %)

319

For ONYX resources, you have additional options at this point. You can, for example, display **statistical evaluations[[doc:ONYX.Statistische Auswertung]]** or perform an **[[anonymous assessment>>doc:Bewertung von Testresultaten]]** without user names.

320

321

322

(% class="TableParagraph" %)

323

These options are only visible if user results are available for the selected course element.

324

325

(% class="TableParagraph" %)

326

**Overall assessment: **The link **//Display// **will bring up a summary of all results including the average scores and passing rate as well as a list of all user results.

327

328

(% class="TableParagraph" %)

329

**Answers: **The link **//Assess// **leads to an overview of all results as well as a list of all test questions. The assessor can see which assessments have already been performed automatically and whether any manual assessments are still necessary (blue M-symbol). Statistical values of previous answers will also be displayed. The assessor can select each task by clicking on its title and manually (re)assess tasks if necessary. More detailed information can be found on the help page [[Assessment of test results.>>url:https://www.bps-system.de/help/display/LMSintern/.Bewertung+von+Testresultaten+v11.x||shape="rect"]] On this page, you will also find instructions on how to perform a manual (user-related or anonymous) test assessment.

(% class="TableParagraph" %)

334

**[[Statistical evaluation>>doc:ONYX.Statistische Auswertung]]: **As soon as there are results available for the course element **//Test// **, **//Self-test// **or **//Survey// **, you can display an anonymous statistical evaluation. The link **//Display// **leads to an overview of all results as well as a list of all test questions and their associated statistical values. The link in the task title leads to the detailed view of the task.

335

336

(% class="TableParagraph" %)

337

Note: A survey can only be completed **once** and only by **registered **users.

)))

)))

|(((

**As per user**

)))|(((

(% class="content-wrapper" %)

345

(((

346

(% class="TableParagraph" %)

347

First select the desired user from the list of all course participants and then, the course element to be assessed from the list of all course elements.

348

349

350

Here you can assess all course participants independently of existing access and visibility rules or the results available in the system.

)))

)))

== Manual user assessment ==

356

357

For the manual user assessment, an assessment form is displayed. This form can be configured, depending on the course element. Available configuration options are explained on the respective course element's help page.

358

359

To perform a (single) manual user assessment, proceed as follows:

360

361

(% class="wrapped" %)

|(((

1

)))|(((

Open the detailed view of the user's assessment.

366

)))|(% rowspan="4" %)(% rowspan="4" %)

367

(((

368

(% class="content-wrapper" %)

369

(((

370

[[image:attach:Kursrun - Bewertungsformular_de.png]]

)))

)))

|(((

2

)))|(((

Depending on the course element, you will then see a preconfigured **assessment form**. To find out more about the configuration options for individual course elements, refer to the respective elements' help pages.

)))

|(((

3

)))|(((

Enter the missing assessment data (e.g. the **score**, a **mark **or** comment**).

)))

|(((

4

)))|(((

Confirm your entries with **//Save// **.

)))

Manual changes to an automatically calculated total score using this assessment form can lead to inconsistencies not only in the ONYX test assessment, but also in the assessment within the learning platform in general, and may confuse your users. Necessary changes to the assessment should therefore be made directly in the test assessment. More detailed instructions can be found on the help page __[[Assessment>>url:https://www.bps-system.de/help/display/LMSintern/.Bewertung+von+Testresultaten+v11.x||shape="rect"]] [[of test results__.__>>url:https://www.bps-system.de/help/display/LMSintern/.Bewertung+von+Testresultaten+v11.x||shape="rect"]]__

To assess several users at once, you can use the collection function [[Bulk assessment>>url:https://www.bps-system.de/help/display/LMSintern/.Bewertungswerkzeug+v11.x#id-.Bewertungswerkzeugv11.x-massenbewertung||shape="rect"]].

395

396

397

== Additional functions in the assessment tool ==

398

399

The assessment tool provides you with the following additional collection functions:

400

401

(% class="wrapped" %)

|=(((

Function

)))|=(((

Description

)))

|(((

**Create grading key**

409

)))|(((

410

(% class="content-wrapper" %)

411

(((

412

(% class="TableParagraph" %)

413

Using a wizard, you can assign marks for **existing user results** from selected learning groups. In the first step of the wizard, create an overview of which scores result in which marks. In a preview, you will now see the expected distribution of marks. As a next step, you can adjust the previously entered scores to control the distribution of marks. The system will then automatically assign the marks using this grading key. In the last step, you can download a complete overview of the assigned marks as a file.

414

415

416

The assessment function **grading key** can only be used for already existing test results. We therefore recommend using this assessment function only after all results have been obtained.

417

418

419

An automatic assignment of marks based on a fixed grading key is not possible with this function.

)))

)))

|(((

**Download certificates**

424

)))|(((

425

The wizard helps you download all existing certificates for the course. You can filter your search by groups and course elements.

)))

|(((

**Bulk assessment**

)))|(((

The mass assessment allows you to assess several course participants at once. This type of assessment is only available for assessable course elements.

)))

|(((

**User results**

)))|(((

Using a wizard, you can select the course element, group, export format and user attributes to be exported. The created list can then be downloaded and saved as a file.

436

)))

437

|(% colspan="1" %)(% colspan="1" %)

438

(((

439

**Verify learner response**

440

)))|(% colspan="1" %)(% colspan="1" %)

441

(((

442

The verification is to confirm that the selected HTML file of the exam overview page has not been subsequently manipulated. Therefore, the technical checksum generated with the standard [[MD5>>url:http://de.wikipedia.org/wiki/Message-Digest_Algorithm_5||shape="rect"]] is compared with the value contained in the HTML page.

443

)))

444

445

== Export lists - User results ==

Proceed as follows:

1. Open your course.

1. Open the assessment tool.

451

1. In the menu **//Export lists// **on the right, click on the entry **//User results// **.

452

453

The opening assistant includes the following steps:

454

455

(% class="wrapped" %)

|(((

1

)))|(((

In **step 1** of the wizard, select the course element whose results you want to download.

460

)))|(((

461

(% class="content-wrapper" %)

462

(((

463

[[image:attach:Kursrun - Teilnehmerergebnisse - Schritt 1_en.png]]

)))

)))

|(((

2

)))|(((

In **step 2**, select the course group (learning group) you want to export.

470

)))|(((

471

(% class="content-wrapper" %)

472

(((

473

[[image:attach:Kursrun - Teilnehmerergebnisse - Schritt 2_en.png]]

)))

)))

|(((

3

)))|(((

In **step 3**,** **select the export format. If you choose** //Custom export format// **, you can open the file with a spreadsheet programme of your choice.

480

)))|(((

481

(% class="content-wrapper" %)

482

(((

483

[[image:attach:Kursrun - Teilnehmerergebnisse - Schritt 3_en.png]]

)))

)))

|(((

4

)))|(((

Then in **step 4**, select the user attributes to be exported. Information relevant for the assessment of a user includes the matriculation number, first and last name as well as the mark or passed status. Close the wizard with **//Finish //**.

490

)))|(((

491

(% class="content-wrapper" %)

492

(((

493

[[image:attach:Kursrun - Teilnehmerergebnisse - Schritt 4_en.png]]

494

)))

495

)))