Proctoring AI — monitoraggio automatizzato degli esami su larga scala

Che cosa fa concretamente il proctoring AI

Il proctoring AI osserva il flusso della webcam per tutta la durata dell'esame e, laddove il monitoraggio dello schermo sia attivato, anche lo schermo condiviso. Ricerca il tipo di anomalia che indurrebbe un proctor a guardare due volte: un volto diverso che compare davanti alla telecamera, il partecipante che esce dall'inquadratura oppure un'interruzione del normale andamento audio e video di una sessione d'esame. Gestisce inoltre la verifica dell'identità all'inizio della sessione, confrontando il partecipante con un documento d'identità: lo stesso controllo disponibile con un proctor dal vivo. Quando non accade nulla di insolito, non accade nulla: nessuno osserva in tempo reale e l'esame si svolge senza interruzioni.

Questo è anche il suo limite. Il proctoring AI segnala, non giudica. Non è in grado di distinguere un partecipante che allunga la mano verso un bicchiere d'acqua da uno che la allunga verso un telefono, quindi segnala entrambi i casi e lascia la distinzione a una persona: non esclude mai nessuno da un esame né decide autonomamente che qualcosa non andava. Questa decisione spetta all'ente esaminatore, sulla base della valutazione del momento segnalato da parte di un revisore umano. Poiché non possiede la comprensione situazionale di un ambiente propria di un proctor dal vivo che osserva in tempo reale, si adatta meglio a esami ad alto volume e con criticità ordinaria che non a esami in cui una valutazione errata risulta onerosa. Per questi ultimi, il proctoring umano, o una combinazione dei due, rappresenta il punto di partenza migliore.

Come funzionano concretamente la segnalazione e la verifica umana

Le segnalazioni avvengono automaticamente, durante l'esame, senza che nessuno assista in diretta: è proprio questo a generare il risparmio sui costi. Quando il sistema genera una segnalazione, non trae conclusioni da sé: aggiunge quel momento a una coda che viene elaborata da un membro qualificato del team di assistenza di PRUEFSTER. Si tratta dello stesso team di assistenza che sta dietro al proctoring umano: l'assistenza non cambia in funzione del prodotto acquistato, cambia solo il fatto che un proctor assista o no in diretta.

La verifica avviene dopo l'esame e non durante, ed è per questo che il confronto qui sopra indica come più elevato l'impegno per la verifica successiva all'esame nel proctoring con IA: qualcuno deve comunque esaminare ciò che è stato segnalato, semplicemente in un secondo momento e non sul momento. Un revisore guarda il video segnalato, decide se vale la pena dare seguito e, in tal caso, redige un resoconto di quanto accaduto perché l'ente esaminatore possa intervenire. La maggior parte delle segnalazioni si rivela irrilevante — una persona che si stira, un'ombra che attraversa la webcam, una breve caduta di connessione — e viene chiusa senza ulteriori azioni. Quelle che non lo sono ricevono la stessa attenzione da parte di personale qualificato che un proctor in diretta avrebbe dedicato loro sul momento, solo con un differimento.

Ecco perché il proctoring con IA si abbina bene a un proctoring umano occasionale, oppure alla scansione della stanza a 360° per gli esami in cui l'importanza della posta in gioco lo giustifica: la segnalazione registra ciò che è accaduto, ma qualcuno deve comunque deciderne il significato.