Peer Review

Von Ihnen abgegebene Reviews sind (zunächst) nicht mehr änderbar. Sie können aber jederzeit per Klick auf den Button Reviews anzeigen von Ihnen als Reviewersteller eingesehen werden.

Der Ersteller der von Ihnen begutachteten Lösung kann das erhaltene Review in der optionalen Feedbackrunde oder im Auswertungsbereich einsehen. Ein Kursverantwortlicher hat im Bewertungswerkzeug Zugriff auf alle Bewertungsdaten.

Den weiteren Ablauf des Reviewverfahrens können Sie im Informationsbereich einsehen.

Eine Angabe, wie viele Feedbacks von Ihnen gefordert werden.

Das gerade geöffnete Feedback.

Das erhaltene Review, zu welchem Sie nun Stellung nehmen sollen.

Erscheint Ihnen ein erhaltenes Review als unangemessen, können Sie die Option Unangemessenes Review melden verwenden. Bei Klick auf den Button öffnet sich ein weiteres Fenster, in dem Sie je nach Konfiguration des Kursautors die Kritikpunkte am Review beschreiben können. Nach der Meldung an den Tutor, wird dieser das Review prüfen und es entweder entsprechend ablehnen oder dennoch akzeptieren.

Füllen Sie die vom Kursautor konfigurierten Textfelder mit Ihrem Feedback und vergeben Sie, wenn gefordert, Punkte für das erhaltene Review.

Speichern Sie Ihr Feedback und führen Sie ggf. weitere Feedbacks durch (Button Abgeben und Weiter). Sind alle aktuell verfügbaren Feedbacks durchgeführt, schließen Sie den Dialog (Button Abschließen).

Nach Klick auf den Button Auswertung anzeigen öffnet sich ein Dialogfenster, in dem die Bewertung zu allen erhaltenen Reviews und ggf. die dazu vergebenen Feedbacks in einer tabellarischen Übersicht angezeigt werden.

Unter der Tabelle befindet sich der Button Reviews anzeigen. Mit Klick auf den Button öffnet sich die Detailansicht.

Die Detailansicht zeigt alle erhaltenen Reviews an und bietet die Möglichkeit, ein unangemessenes Review zu melden (auch dann, wenn der Kursautor keine Feedbackrunde vorgesehen hat).

In der Spalte Status sind folgende Einträge möglich:

Zeitraum für Review: Legen Sie ein Zeitfenster fest, in welchem Nutzer Reviews einreichen können. Innerhalb dieses Zeitfensters können bereits eingereichte Reviews beliebig vom Ersteller verändert werden.

Konfigurieren Sie die Review-Vorlage:

• Optional können Sie im Textfeld Hinweise für den Reviewer eintragen.
• Wählen Sie die gewünschte Punktevergabe. Es stehen Ihnen die Optionen Gesamtpunktzahl vergeben und Punkte je Freitextfeld zur Verfügung.
• Geben Sie die Punktzahl an, die die Reviewer maximal vergeben können.
• Fügen Sie optional weitere Freitextfelder hinzu.
• Wählen Sie die Option Dokumente - Reviewer dürfen Dateien hochladen aus, wenn die Teilnehmer Dateien innerhalb des Review hinzufügen sollen.

Speichern Sie Ihre Eingaben.

Zeitraum: Legen Sie ein Zeitfenster fest, in welchem Nutzer Feedback zu Reviews ihrer Aufgabenlösung geben können.
Innerhalb dieses Zeitfensters können eingereichte Feedbacks beliebig vom Ersteller verändert werden.

Konfigurieren Sie die Feedback-Vorlage:

• Optional können Sie im Textfeld Hinweise zum Feedback eintragen.
• Wählen Sie die gewünschte Punktevergabe. Es stehen Ihnen die Optionen Gesamtpunktzahl vergeben und Punkte je Freitextfeld zur Verfügung. Die Punktebewertung innerhalb eines Feedbacks dient der qualitativen Bewertung von Reviews.
• Fügen Sie optional weitere Freitextfelder hinzu.

Speichern Sie Ihre Angaben.

Legen Sie einen Zeitraum fest, in dem Nutzer die Bewertungsergebnisse einsehen können. Wenn Sie beide Felder leer lassen, sieht der Nutzer seine Ergebnisse, sobald die Bedingungen erfüllt sind.

Klicken Sie im linken Menü auf die Auswahl Nach Kursstruktur.

Wählen Sie den gewünschten Kursbaustein vom Typ Aufgabe und anschließend ggf. eine Teilnehmergruppe aus.

Die angezeigte Tabelle enthält Angaben zu den durchgeführten Reviews anderer Teilnehmer. Neben dem Namen der Nutzer, die das Review erstellt haben, sind Gesamtpunkte und Hinweise zum Review-Status enthalten. Über einen Link können alle Reviewinhalte mit dem gegebenenfalls vorliegenden Feedback zum Review angezeigt werden.

Name des Nutzers mit Link zur Detailbewertung

Klicken Sie auf den angezeigten Namen eines Nutzers. Es öffnet sich die Detailansicht der Bewertung zu diesem Kursbaustein für den gewählten Nutzer.

Vergebene Reviews

Der Link auf dem Eintrag öffnet einen Dialog mit den vom Nutzer vergebenen Reviews.

Gewählter Kursbaustein

Gewählter Nutzer

Aufgabe und Lösung des Nutzers

Erhaltene Reviews und Status der Reviews

Möglichkeit, ein Expertenreview zu vergeben

Bewertungsformular mit Gesamtergebnis

Änderungsverlauf zur Bewertung einsehen

Mit Klick auf den Button Review ignorieren stimmen Sie dem Einwand des Nutzers zu und das als unangemessen gemeldete Review wird aus der Berechnung der Gesamtauswertung entfernt. Der Review-Status ändert sich von „Gemeldet“ auf Gemeldet (wird ignoriert). Durch den Ausschluss eines Reviews kann die Anzahl der Reviews des Nutzers kleiner sein als die vorgegebene Mindestanzahl. Bitte prüfen Sie deshalb die gesamte Bewertung und passen Sie sie, wenn nötig, über das Bewertungsformular oder per Expertenreview an.

Mit Klick auf den Button Review akzeptieren lehnen Sie den Einwand des meldenden Nutzers ab und das gemeldete Review bleibt in der Berechnung der Gesamtauswertung enthalten. Der Review-Status ändert sich von „Gemeldet“ auf Gemeldet (wird akzeptiert).

Es wurde ein Expertenreview vergeben. Dieses fließt in die Gesamtbewertung ein.

Wechseln Sie im Bewertungswerkzeug in die Detailansicht der Bewertung eines Nutzers.

Im Bereich Erhaltene Peer Reviews finden Sie unter der Tabelle den Button Expertenreview abgeben.

Bei Klick auf den Button öffnet sich das Reviewformular, in dem Sie nun ein Review für den Teilnehmer abgeben können. Für das Expertenreview steht Ihnen das gleiche Formular zur Verfügung, das auch den Teilnehmern für das Review angezeigt wird.

Geben Sie das Review mit Speichern und Schließen ab. Ihr Review erhält in der Übersichtstabelle und allen Nutzeransichten den Status bzw. Zusatz Expertenreview.

The course creator may allow the assignment of additional reviews. In this case, more than one solution will be available to you for review.

Once a review has been submitted, it can no longer be edited (at this point). However, being the review creator, you can view your submitted reviews at any time by clicking on the Show review button.

The creator of the reviewed solution can access the review from the optional feedback session or the assessment area. A course owner has access to all assessment data in the assessment tool.

The next steps in the review process can be obtained from the information section.

An indication of how much feedback you need to give.

The just opened feedback.

The review you received and on which you should leave a comment now.

If you think that the review you received might be inappropriate, you can use the Report inappropriate review option. Clicking on the button will open another window where you can describe the points of criticism aimed at the review, depending on the course author's configuration. After the supervisor has been informed, they will check the review and either refuse or accept it.

Fill in the text fields configured by the course author with your feedback and award points for the received review if required.

Save your feedback and give more feedback if necessary (Submit and continue button). Once all currently available feedback requests have been completed, close the dialogue (Finish button).

Clicking on the Show evaluation button will open a dialogue box where the assessment for all received reviews and any given feedback is displayed in a tabular overview.

Below the table is the Show reviews button. Click this button to open the detailed view.

The detailed view shows all received reviews and offers the possibility to report inappropriate reviews (even if the course author has not enabled a feedback round).

Time frame for review: Set a time frame for users to submit reviews. Within this time frame, submitted reviews can still be changed by the creator.

Configure the template review form:

• Optionally, you can enter review hints in the text field.
• Select the desired scoring. You can choose from the options Overall score and Score per text field.
• Enter the maximum score that reviewers may award.
• Optionally, add more free text fields.
• Select the option Documents – Reviewers may upload files if the participants should be able to add files to the review.

Save your entries.

Time frame: Set a time frame for users to give feedback on reviews of their solution. Within this time frame, submitted feedback can still be changed by the creator.

Configure the template feedback form:

• Optionally, you can enter feedback hints in the text field.
• Select the desired scoring. You can choose from the options Overall score and Score per text field. The scoring within feedback serves the qualitative assessment of reviews.
• Optionally, add more free text fields.

Save your entries.

Set a time frame for users to view the overall results. If you leave both fields empty, the user will not see their results before the conditions are met.

Go to the assessment tool of the desired course.

In the left menu, click on the entry As per course structure.

Select the desired task course element and, if necessary, a course group.

The displayed table includes information on the reviews carried out by other participants. In addition to the names of the users who created the review, the total score and indications on the review status can be inferred. Using the links, you can display all review content together with the corresponding feedback, if any.

Name of the user with a link to the detailed assessment

Click on a displayed username. This will open the course element’s detailed assessment view for the selected user.

Given reviews

The link on the entry opens a dialogue with the reviews submitted by the user.

The number of reviews received so far for this user is below the configured minimum number of reviews. If the period for the submission of reviews has already expired and the minimum number has not been reached, you should check the assessment of the affected user, write an expert review if necessary and adjust the assessment form.

If not all required columns are displayed, you can change the column configuration by clicking on this icon.

Selected course element

Selected user

Task and solution of the user

Reviews received and status of the reviews

Possibility to give an expert review

Assessment form with overall score

Show log file

By clicking on the Ignore review button, you agree to the user's objection, and the review that has been reported as inappropriate will not be included in the calculation of the overall score. The review status then changes from "Reported" to Reported (will be ignored). Discarding a review may lead to the number of the user’s reviews falling below the predetermined minimum number. Therefore, please check the entire assessment and adjust it if necessary, using the assessment form or by performing an expert review.

By clicking on the Accept review button, you dismiss the user's objection, and the reported review will still be considered in the calculation of the overall score. The review status then changes from “Reported” to Reported (will be accepted).

An expert review has been performed and will be considered in the overall assessment.

Using the “Accept review" button, you will approve of the review, and it will be included in the overall assessment. The review status then changes from “Inspection pending” to Accepted.

Using the “Refuse review” button, you will dismiss the review, and it will not be included in the calculation of the overall assessment. The review status then changes from “Inspection pending” to Refused.

Discarding a review may lead to the number of received reviews falling below the predetermined minimum number. Therefore, please check the entire assessment and adjust it if necessary, using the assessment form or by performing an expert review.

The Apply review button does not become active until all existing reviews have been viewed and accepted or refused. Clicking on the button stores and transmits the average total score of all individual reviews to the total score field of the assessment form. Depending on the configuration, this will lead to passing the course element.

Switch to the detailed view of a user's assessment in the assessment tool.

In the Peer reviews received section, you will find the Give expert review button right underneath the table.

Clicking on the button will open the review form, where you can now give a review for the participant. For the expert review, you will be provided with the same form as the participants for the regular review.

Submit the review with Save and close. Your review will then receive the status or addition expert review in the summary table and all user views.