Proctoring mit Meazure Learning-Integration

Die Meazure Learning-Integration ist eine umfassende Lösung für Tests mit Online-Prüfungsaufsicht, die darauf ausgelegt ist, die Integrität von Online-Tests zu gewährleisten. Dieser Dienst verbindet modernste Technologie mit menschlicher Aufsicht, um den Prüfungsablauf von Anfang bis Ende zu überwachen und zu sichern.

Die wichtigsten Funktionen des Proctoring-Ansatzes von Meazure Learning

• Sicherer Start der Tests: Vor Beginn des Tests überprüft ein zertifizierter Live-Aufseher die Identität des Prüfungsteilnehmers mittels Multi-Faktor-Authentifizierung und führt eine gründliche Überprüfung der Umgebung durch, um alle nicht zugelassenen Materialien zu entfernen.

• Kontinuierliche Live-Überwachung (Live+): Während des gesamten Tests überwachen die Aufsichtspersonen die Testteilnehmer aktiv in Echtzeit, um die Einhaltung der Testregeln sicherzustellen und verdächtiges Verhalten zu erkennen.

• Aktive Intervention (Live+): Wird ein mögliches Fehlverhalten festgestellt, können die Aufsichtspersonen sofort eingreifen, um das Problem zu klären und so die Integrität des Tests zu wahren.

• Umfassendes Reporting: Nach dem Test werden detaillierte Reports bereitgestellt, in denen alle Vorfälle dokumentiert werden und Einblicke in die Testsitzung gegeben werden.

• Integration fortschrittlicher Technologien: Das System nutzt hochentwickelte Software, um die Aufsichtspersonen zu unterstützen, indem es ungewöhnliche Aktivitäten meldet, die anschließend von menschlichen Experten überprüft werden, um festzustellen, ob Maßnahmen erforderlich sind.

• Verwendung der Guardian-Browsererweiterung: Die Testteilnehmer greifen über die Guardian-Browsererweiterung von Meazure Learning auf ihre Tests zu. Diese sperrt die Testumgebung, um unbefugten Zugriff auf andere Erweiterungen, Websites, die Nutzung mehrerer Monitore usw. zu verhindern.

Die Integration von Meazure Learning in das LMS umfasst automatisches Proctoring mit Record+ und Live-Proctoring mit Live+.

Die Integration der Proctoring-Lösung ermöglicht Administratoren eine schnelle Einrichtung einer Verbindung und des Tests, während die Lernenden live überwachte Testsitzungen planen und absolvieren können. Darüber hinaus können Vorfälle, die von den Aufsichtspersonen während der Live-Sitzung gemeldet werden, von Tutoren und Administratoren problemlos bearbeitet werden.

Administratoren können im LMS ganz einfach Tests und Prüfungen für die Live-Aufsicht einrichten. Tutoren können fundierte Entscheidungen über die Gültigkeit gemeldeter Vorfälle während der Aufsicht treffen, den Status von Tests im LMS problemlos klären und den Prüfungsteilnehmern die Ergebnisse zeitnah zur Verfügung stellen.

Für die Nutzung der Proctoring-Integration ist die Proctoring-Lizenz erforderlich (die in Lizenzmanager) sowie der Chrome-Browser sind für die Installation der Guardian-Chrome-Erweiterung von Meazure Learning erforderlich.

Schritte zur Einrichtung eines beaufsichtigten Tests

Eine Proctoring-Lizenz erstellen

Weiter zu Lizenzmanager und eine Proctoring-Lizenz für die Nutzung der „Live+“- und „Record+“-Integration erstellen.

Externen Service-Anbieter anlegen

1. „Meazure Learning“ als externen Service-Anbieter im Manager für externe Service-Anbieter erstellen, indem in der Symbolleiste auf der linken Seite auf „Erstellen“ geklickt wird.

2. Name, Beschreibung, Learner Front-End URL, API-endpoint und API-Key (bereitgestellt von Meazure Learning) eingeben und die Proctoring-Option Record+ für die Einrichtung des automatischen Proctorings auswählen. Für die Einrichtung von Live+ für live beaufsichtigte Tests muss Live+ ausgewählt werden. Sobald der externe Service-Anbieter gespeichert wurde, kann die festgelegte Proctoring-Option nicht mehr geändert werden.

3. Die Einstellung „Testplanung 24 Stunden im Voraus erlauben“ muss entsprechend der Systemkonfiguration auf der ProctorU-Seite angepasst werden.

Test erstellen

1. Ein Test wird im Testmanager erstellt und im Reiter „Beschreibung“ wird der zuvor erstellte Meazure Learning – Service Anbieter als Proctoring-Dienst ausgewählt.

2. Anschließend wird ein Kurs erstellt und der in Schritt 1 erstellte Test wird als Kurskomponente hinzugefügt. Um Verwirrungen bezüglich der Zeitzonen zu vermeiden, wird empfohlen, die Einstellung „Zeitzone fixieren“ zu verwenden.

Eine Abmeldung vom Kurs durch den Nutzer oder den Administrator ist im LMS möglich, der Eintrag zur Prüfungssitzung bleibt jedoch auf Meazure Learning bestehen.

Record+ Test – Automatisches Proctoring

Lerner-Workflow

Nachdem ein Lernender für einen Kurs mit einem „Record+“-Test angemeldet wurde, kann er den Test wie einen regulären Test ad-hoc innerhalb des Kurszeitraums starten und wird zur Meazure Learning-Plattform (ProctorU) geleitet, um ein Passwort zu erstellen. Dort wird er durch die Vorbereitungsschritte zum Test geführt, einschließlich der Erlaubnis zum Starten der Bildschirmfreigabe und Aufzeichnung sowie der Identitätsprüfung, und anschließend wieder auf die Test-Startseite in LMS weitergeleitet.

Der Lernende wird dazu angeleitet, die Guardian-Browsererweiterung zu installieren, bevor er zu ProctorU weitergeleitet wird, sofern dies noch nicht geschehen ist.

1. Auf die Kachel der Testkomponente oder auf die Schaltfläche „Öffnen“ klicken, um zu ProctorU weitergeleitet zu werden.

2. Kontoeinstellung prüfen und Zeitzone auswählen (falls bei der ersten Anmeldung ein Passwort festgelegt werden muss)

3. Herunterladen der Guardian-Erweiterung und Installation, Starten der Vorabprüfung auf ProctorU (erfordert Chrome)

4. Aufzeichnung von Bildschirmfreigabe und Mikrofon zulassen

5. Durchführung aller Schritte, einschließlich des Lesens der Prüfungsordnung, der Sonderregelungen und der Identitätsprüfung (Webcam erforderlich), und Klicken auf die Schaltfläche „Prüfung beginnen“, um zum LMS weitergeleitet zu werden.

Anschließend kann der Lernende den Test im LMS absolvieren und nach dem Absenden die Bildschirmfreigabe über das geöffnete Popup-Menü beenden sowie die Aufzeichnung stoppen.

Tutor Workflow: Bewertung des Proctorings

Die Aufzeichnungen der Prüfung werden von Meazure Learning bereitgestellt und stehen auf der ProctorU-Plattform zur Überprüfung durch den Tutor zur Verfügung. Je nach Auswertung der Aufzeichnungen können die Prüfungen im LMS als nicht bestanden gewertet werden.

Live+ Test für Live-Proctoring

Lerner Workflow bei der Live-Proctoring

Der Ablauf für Lernende bei der Live+-Integration unterscheidet sich von dem bei der Record+-Integration. Nach der Anmeldung zu einem Kurs mit einer live beaufsichtigten Prüfung wird der Lernende per E-Mail darüber informiert, dass er einen Termin für die live beaufsichtigte Prüfungssitzung vereinbaren muss.

Zeitplanung durch den Lernenden

Hinweis zu veralteter Funktion: Dieser Workflow basiert auf der BlueBirdExam-API. Lernende, die in Systemen bis Version 14.29.x für Kurse mit Live+-Tests gebucht sind, können weiterhin terminiert und gestartet werden.

Die Terminvereinbarung erfolgt durch den Lernenden und kann entweder über den Link in der E-Mail von Meazure Learning oder durch Anklicken der Testkachel bzw. der Schaltfläche zur Terminvereinbarung auf der Testkachel im Kurslehrplan vorgenommen werden (siehe Screenshot des LMS und die anschließende Terminvereinbarung auf ProctorU unten). Der gültige Zeitraum für die Terminvereinbarung des Tests ist wie folgt festgelegt:

• Terminabhängige Kurse: anhand des Start- und Enddatums eines terminabhängigen Kurses,

• Nutzungsdauer des Kurses: ab dem individuellen Kursbeginn des Lernenden und entsprechend der im Kurs festgelegten Dauer.

Hinweis: Für Lernende, die die MEZ (Mitteleuropäische Zeit) eingestellt haben, wird während der europäischen Sommerzeit bei der Zeitzonenanzeige auf ProctorU die MESZ (Mitteleuropäische Sommerzeit) verwendet.

Wenn der Lernende den Lehrplan erneut aufruft, wird ihm der geplante Termin für den Testangezeigt.

Falls der Termin versäumt wird, muss der Lernende abgemeldet und erneut angemeldet werden, damit der Test innerhalb des gültigen Zeitraums neu angesetzt werden kann.

Zeitplanung durch Lernende (neuer Workflow)

Wenn Lernende nach einer Selbstbuchung oder Fremdbuchung für einen Kurs im Kurslehrplan auf das Kalendersymbol der Testkachel klicken, öffnet sich ein Fenster. Dort müssen Datum und Uhrzeit ausgewählt werden, um die verfügbaren Zeiten für einen live beaufsichtigten Test anzuzeigen.

Nach dem Klick auf die Schaltfläche „Planen“ wird der Termin gespeichert. Die geplante Uhrzeit wird auf der Kachel angezeigt.

Lernende können einen Termin innerhalb des zulässigen Zeitraums für die Zeitplanung neu planen und stornieren.

Während des zulässigen Buchungszeitraums sind Neuplanung und Stornierung möglich.

Konnten Lernende einen Test aus technischen oder anderen Gründen nicht rechtzeitig abgeben, bleibt der Test im Status „In Bearbeitung“ und hat den derzeit endgültigen Zeitplanungsstatus „unvollständig“. Künftig können Administratoren den Test und den Zeitplanungsstatus zurücksetzen.

Der Zeitplanungsstatus eines Tests entspricht einem der Status in der folgenden Tabelle:

Zeitplanung durch Vorgesetzte

Vorgesetzte können ihre Mitarbeitenden im Testplanungs-Manager planen, der über ein konfigurierbares Navigationselement erreichbar ist. In der Hauptansicht des Testplanungs-Managers werden alle Tests der Kurse angezeigt, für die die Mitarbeitenden gebucht sind. Tests in ausgeblendeten Ordnern des Lehrplans werden nicht angezeigt.

Im Testplanungs-Manager sind folgende Aktionen möglich:

• Suche nach Testname

• Filtern nach Kursname (hinter dem Kursnamen wird die Kurs-ID angezeigt)

• Sortieren nach Testname

• Anzeigen von Tests, die nicht geplante Lernende enthalten

• Öffnen der Test-Seitenleiste, um Lernende zu planen

Im Fenster zur Zeitplanung der Lernenden werden alle Lernenden, die Mitarbeitende der jeweiligen Vorgesetzten sind, mit allen Informationen aufgelistet, wie in der folgenden Tabelle zu sehen ist.

Je nach Status sind unterschiedliche Aktionen möglich, wie in der folgenden Tabelle beschrieben:

Die Zeitplanung einzelner Lernender (siehe unten) und mehrerer Lernender (siehe zweiten Screenshot) funktioniert auf dieselbe Weise.

Für die Sammelplanung müssen jedoch mehrere Lernende ausgewählt werden, und die Schaltfläche am unteren Seitenrand muss angeklickt werden.

Den Test absolvieren

Die Testsitzung wird ähnlich wie der Workflow für Lerner der Record+-Integration (siehe oben) durchgeführt. Der Lernende wird jedoch durch alle Schritte auf der ProctorU-Plattform geführt und anschließend zum Test weitergeleitet. Sobald der Test abgegeben wurde, ist kein zweiter Versuch mehr möglich.

Falls der Testaufseher während der Testsitzung keinen Vorfall gemeldet hat, kann der Lernende seine Testergebnisse direkt einsehen und sein Abschlusszertifikat herunterladen.

Tutoren-Workflow: Auswertung der Testaufsicht

Wenn ein Proctoring-Vorfall (Incident) vom Proctor gemeldet wurde, wird der Test nach der Abgabe durch den Lernenden automatisch in den Status „in Proctoring-Bewertung“ versetzt. Die zuständigen Tutoren werden per E-Mail über die Proctoring-Vorfälle pro Lernenden informiert und können direkt auf die Aufzeichnungen und Notizen des Test-Proctors auf der ProctorU-Plattform zugreifen.

Im LMS kann der Tutor den entsprechenden Kurs des Tests finden. In der Ansicht „Kursfortschritt pro Benutzer“ innerhalb der Kursbetreuung sieht der Tutor den Status des Proctoring-Verstoßes. Dort kann er den Status „in Proctoring-Bewertung“ eines Tests über das Flaggensymbol in der Symbolleiste auflösen (siehe Screenshot unten).

Der Lernende kann erst dann auf sein Testergebnis zugreifen und sein Abschlusszertifikat herunterladen, wenn der Test mit dem Ergebnis „kein Vorfall festgestellt“ abgeschlossen wurde.

Reports

Die Testergebnisse werden nun im Berichtsbereich für Lernende und Testergebnisse sowie in den folgenden Berichten angezeigt:

• SOLR-Testfragen pro Benutzer

• Testfragen pro Benutzer

• Testergebnisse (Lernende)

• Testergebnisse (Vorgesetzter)

Die neue Spalte „Status des Proctoring-Vorfalls“ wird dem Bericht hinzugefügt, sofern die Proctoring-Lizenz aktiv ist. Sie gibt den aktuellen Proctoring-Status für überwachte Prüfungen wieder. Auch die bestehenden Spalten „Erreichte Bewertungsstufe“, „Erreichter Prozentsatz/Prüfungsergebnis“ und „Punktzahl“ spiegeln den aktuellen Status wider. Wird ein Vorfall bestätigt, wird die „Erreichte Bewertungsstufe“ auf „nicht bestanden“ gesetzt, und der „Erreichte Prozentsatz“ sowie die „Punktzahl“ werden auf 0,0 gesetzt.

Einschränkungen

• Prüfungen unter Aufsicht können nur Kursen zugewiesen werden, für die Administratorrechte bestehen

• Die Terminierung von Live-Tests mit Aufsicht kann nicht im Komponentenmanager vorgenommen werden

• Meazure Learning verwendet die E-Mail-Adresse des Nutzers als eindeutige Kennung; Nutzer ohne E-Mail-Adresse können sich nicht bei Meazure Learning registrieren.

• Proctoring-Tests können im Kursplan nicht automatisch aktualisiert werden

• Eine beaufsichtigte Prüfung funktioniert nicht, wenn sie über die einfache Kurserstellung hinzugefügt wird

• Bei Proctoring-Tests ist nur ein Testversuch zulässig

• Es wird nicht unterstützt, dass derselbe Nutzer in mehreren Kursen an einem beaufsichtigten Tests teilnimmt

• Das Hinzufügen/Bearbeiten von Unterkünften und zugelassenen Ressourcen wird nicht unterstützt

• Änderungen des Kursbeginns und des Kursendes werden bei der Terminplanung nicht berücksichtigt, sobald der erste Teilnehmer angemeldet ist

• Beaufsichtigte Tests funktionieren nicht in Kursen, die mit der einfachen Kurserstellung erstellt wurden

• Beim Öffnen der Prüfung kommt es vor, dass Meazure Learning zwei Tabs mit demselben Namen öffnet (Fehler auf Seiten von Meazure Learning)

• Ein Test kann von demselben Lernenden nicht zweimal absolviert werden, selbst wenn derselbe Test einem anderen Kurs hinzugefügt wird.

  • Die Einstellungen für „Logik lernen“ und „Test-Player“ werden auf eine einzige reduziert

• Prüfungen unter Aufsicht können beim Start des Kurses nicht automatisch im Kursplan aktualisiert werden