AI proctoring — automatizovaný dohled nad zkouškami ve velkém měřítku

Co AI proctoring skutečně dělá

AI proctoring sleduje přenos z webové kamery po celou dobu zkoušky a tam, kde je zapnuté monitorování obrazovky, také sdílenou obrazovku. Hledá takové anomálie, u nichž by se proctor podíval podruhé — objevení jiné tváře před kamerou, opuštění záběru účastníkem nebo přerušení běžného zvukového a obrazového vzorce zkouškové relace. Na začátku relace rovněž zajišťuje ověření totožnosti, kdy porovnává účastníka s dokladem totožnosti — jde o stejnou kontrolu, jaká je k dispozici u živého proctora. Když se nestane nic neobvyklého, nestane se nic: nikdo nesleduje dění v reálném čase a zkouška probíhá bez přerušení.

V tom spočívá také jeho hranice. AI proctoring označuje; neposuzuje. Nedokáže rozlišit účastníka sahajícího po sklenici vody od účastníka sahajícího po telefonu, a tak označí oba případy a rozlišení ponechá na člověku — nikdy nikoho ze zkoušky nevyloučí ani sám nerozhodne, že došlo k pochybení. Toto rozhodnutí náleží poskytovateli zkoušky na základě posouzení označeného okamžiku lidským kontrolorem. Protože nemá situační porozumění místnosti tak, jak je má živý proctor sledující dění v reálném čase, hodí se spíše pro testování s vysokým objemem a běžnou mírou rizika než pro zkoušky, kde je chybné rozhodnutí nákladné. Pro ty je lepším výchozím bodem lidský proctoring nebo kombinace obojího.

Jak ve skutečnosti funguje označování podezřelých momentů a lidská kontrola

Označování podezřelých momentů probíhá automaticky během zkoušky, aniž by kdokoli sledoval dění v reálném čase – právě v tom spočívá celá úspora nákladů. Když systém označí určitý moment, nevyvozuje z něj sám žádný závěr: zařadí jej do frontyeue, kterou zpracovává vyškolený člen podpůrného týmu PRUEFSTER. Jde o stejný podpůrný tým, který stojí za lidským dohledem nad zkouškami – podpora se nemění podle toho, který produkt si zakoupíte, mění se pouze to, zda zkoušku navíc sleduje dozorující osoba v reálném čase.

Kontrola probíhá po zkoušce, nikoli během ní, a proto je ve výše uvedeném srovnání u AI dohledu uvedena vyšší náročnost kontroly po zkoušce: někdo se stále musí podívat na to, co bylo označeno, jen později a ne v daném okamžiku. Pracovník kontroly si označený záznam přehraje, rozhodne, zda si zaslouží další prošetření, a pokud ano, sepíše, co se stalo, aby na to mohl poskytovatel zkoušky reagovat. Většina označených momentů se nakonec ukáže jako bezvýznamná – někdo se protáhl, přes webovou kameru přešel stín, na okamžik vypadlo připojení – a uzavírá se bez dalších opatření. Těm ostatním se věnuje stejně vyškolený personál, jaký by jim věnovala dozorující osoba v reálném čase, jen s určitým zpožděním.

Proto se AI dohled dobře kombinuje s občasným lidským dohledem nebo s 360° skenem místnosti u zkoušek, u nichž to jejich význam odůvodňuje: označování zachytí, co se stalo, ale někdo stále musí rozhodnout, co to znamená.