Statistische Auswertung
Statistische Auswertung
Für alle Testszenarien steht eine statistische Auswertung zur Verfügung. Die statistische Auswertung gibt einen Überblick darüber, wie häufig Aufgaben richtig oder falsch beantwortet wurden und welche Antworten wie häufig durch die Teilnehmer gegeben wurden. Neben einem Rückschluss auf den allgemeinen Lernstand der Teilnehmer, sowie konkreten Problemstellen, ist auf diese Weise auch die Qualitätsanalyse der einzelnen Aufgaben, Antwortmöglichkeiten und der definierten Auswertung (bspw. der Lösungsmöglichkeiten) möglich.
In der statistischen Auswertung werden alle Daten anonymisiert. Für geschlossene Aufgabenformen (bspw. Auswahlaufgaben) wird prozentual angezeigt, wie häufig die vorgegebenen Antwortalternativen gewählt wurden. Für offene Aufgabenformen (bspw. Lückentextaufgaben) werden alle durch die Teilnehmer gegebenen Antworten entsprechend ihrer Häufigkeit gelistet. Richtige Antworten werden grün markiert. Bei der statistischen Auswertung eines Fragebogens entfällt die Kennzeichnung der Antworten als richtig oder falsch und es werden nur die entsprechenden Häufigkeiten dargestellt.
Kennwerte zur Schwierigkeit und Trennschärfe
Bei Tests mit mindestens 10 Resultaten sind zusätzlich statistische Kennwerte zur Schwierigkeit und zur Trennschärfe der verwendeten Aufgaben verfügbar. Für beide Kenngrößen werden zusätzliche Hinweise bei Überschreitung von Grenzwerten angezeigt.
Kennwert Schwierigkeit
Die Schwierigkeit berechnet sich aus dem Verhältnis der durchschnittlich erreichten und der maximalen Punktzahl der Aufgabe. Sie wird als ganzzahliger Prozentwert angegeben und zeigt an, wie viele Testteilnehmer diese Aufgabe richtig beantwortet haben.
Hohe Werte kennzeichnen Aufgaben, die von Testteilnehmern tendenziell richtig beantwortet werden (leichte Aufgaben). Niedrige Werte markieren Aufgaben, die eher falsch bzw. mit wenigen Punkten bewertet werden (schwierigere Aufgaben). Hat eine Aufgabe eine auffällig niedrige oder hohe Schwierigkeit (<20%, >80%) erscheint ein Hinweis.
Kennwert Trennschärfe
Die Trennschärfe misst den Zusammenhang zwischen Aufgaben- und Testergebnis der Teilnehmer. Sie gibt an, wie gut oder schlecht sich eine Aufgabe im Gesamttestergebnis widerspiegelt.
In die Berechnung dieser Korrelation fließt eine Part-whole-correction (Abzug der Punktzahl des betroffenen Items von der Testpunktzahl) ein. Zusätzlich werden pro Aufgabe nur solche Resultate zur Berechnung genutzt, bei denen Teilnehmer eine Antwort abgegeben haben. Unbeantwortete Aufgaben fließen nicht in die Berechnung ein.
Liegt die Trennschärfe unter 0,3 hat eine Aufgabe eine auffällig niedrige Trennschärfe. Diese Aufgabe differenziert damit unzureichend in den Antworten zwischen Teilnehmern mit einer schwachen sowie starken Testbewertung. Eine negative Trennschärfe kann ein Hinweis darauf sein, dass eine Aufgabe umgekehrt als beabsichtigt verstanden wurde.