Řešení
AI proctoring: automatizovaná kontrola nahraných zkouškových relací umělou inteligencí
Detekční modely provozované na naší vlastní infrastruktuře prověří každou nahranou zkouškovou relaci – zjišťují, zda účastník neopustil místnost, zda se před webkamerou neobjevila další osoba a zda nebyl na sdílené obrazovce použit chatbot, například ChatGPT. Relaci poté ohodnotí zeleně, žlutě nebo červeně. Nižší náklady než u kontroly člověkem nebo živého dohledu, více účastníků současně, výsledky do tří hodin po zkoušce.
Domluvit si ukázku
Co AI proctoring od PRUEFSTER skutečně dělá
AI proctoring v PRUEFSTER je automatizovaná kontrola nahrávky zkoušky. Během zkoušky se – stejně jako u každé jiné zkoušky s PRUEFSTER – zaznamenává webkamera účastníka a v případě, že je tato funkce aktivní, také sdílená obrazovka. Po zkoušce projdou naše detekční modely tuto nahrávku a hledají tři druhy incidentů: opuštění místnosti účastníkem, výskyt další osoby v obraze webkamery a použití chatbota, například ChatGPT, na sdílené obrazovce.
Každá detekce je označena včetně své pozice v nahrávce. Na základě zjištěných detekcí pak umělá inteligence klasifikuje celou relaci jako zelenou, žlutou nebo červenou. Toto hodnocení semaforem vidí pořadatel zkoušky jako první, takže relace vyžadující bližší pohled na první pohled vyniknou mezi ostatními.
Modely, které tuto práci vykonávají, běží na vlastní infrastruktuře PRUEFSTER. Záznamy z webkamery ani nahrávky obrazovky se k analýze nikdy neodesílají žádnému externímu poskytovateli AI; detekce probíhá na systémech, které sami provozujeme a spravujeme.
Kontrola pomocí AI vs. živý dohled člověkem
| AI proctoring | Živý dohled člověkem | |
|---|---|---|
| Náklady na relaci | Nižší | Vyšší |
| Účastníci současně | Více | Méně |
| Kdy je výsledek k dispozici | Do 3 hodin po zkoušce | Okamžitě, v průběhu zkoušky |
| Co obdržíte | Zelené / žluté / červené hodnocení s označenými detekcemi | Živé sledování dozorující osobou |
| Kde analýza probíhá | Detekční modely provozované společností PRUEFSTER | Dozorující osoby PRUEFSTER nebo vaši vlastní pracovníci |
Co vám kontrola pomocí AI přinese
Nižší náklady
Žádné hodiny lidské práce na jednu relaci – levnější než kontrola člověkem nebo živý dohled člověkem.
Více účastníků současně
Nezávisí na počtu dozorujících osob ve službě, takže lze současně pokrýt výrazně více relací.
Tři typy detekcí
Opuštění místnosti účastníkem, další osoby v obraze webkamery a chatboti, například ChatGPT, na sdílené obrazovce.
Zelená, žlutá, červená
Každá relace získá jedno jednoznačné hodnocení na základě zjištěných detekcí.
Detekce na vlastní infrastruktuře
Modely běží na naší vlastní infrastruktuře. Obrazové záznamy se nikdy neodesílají externí AI.
Výsledky během několika hodin
Relace je zkontrolována do tří hodin od konce zkoušky.
Jak kontrola pomocí AI funguje a kdy se pro ni rozhodnout
Kontrola probíhá po zkoušce, nikoli během ní. Jakmile sezení skončí, jeho záznam se předá detekčním modelům. Než je sezení zkontrolováno a jeho hodnocení je k dispozici, může od konce zkoušky trvat až tři hodiny. To je hlavní kompromis ve srovnání s lidským live proctoringem, kdy proctor sleduje zkoušku v reálném čase a výsledek je k dispozici okamžitě.
Protože u každého sezení nemusí být přítomen proctor, zvládne AI kontrola pokrýt současně výrazně více účastníků než náš live proctoring a náklady na jedno sezení jsou nižší než u lidské kontroly i u lidského live proctoringu. Díky tomu je ideální volbou pro zkoušky s velkým počtem účastníků, u nichž hodnocení v řádu několika hodin plně postačuje.
Pokud je u vašich zkoušek potřeba reagovat ještě v době, kdy je účastník v sezení, je správným nástrojem live proctoring s lidským dozorem. Pokud potřebujete konzistentní hodnocení všech sezení ve velkém objemu a můžete na něj počkat až tři hodiny, je AI proctoring cenově výhodnější variantou.
- Než je sezení po zkoušce zkontrolováno
- ≤ 3 h
- Snímky odesílané externím poskytovatelům AI
- 0
- Úrovně hodnocení: zelená, žlutá, červená
- 3
Díky spolupráci s PRUEFSTER jsme mohli i navzdory omezením vyplývajícím z pandemie umožnit velkému počtu uchazečů zúčastnit se oborově specifických testů předpokladů. PRUEFSTER nám byl vždy k dispozici a rovněž nás velmi podpořil při organizaci celého procesu.
Často kladené otázky
Co AI proctoring od PRUEFSTER detekuje?
Tři typy incidentů: účastník opustí místnost, v obraze webkamery se objeví další osoba a při sdílení obrazovky je použit chatbot, například ChatGPT.
Jak jsou výsledky prezentovány?
Každé sezení je na základě detekcí AI klasifikováno jako zelené, žluté nebo červené, takže sezení, která vyžadují bližší pohled, okamžitě vyniknou.
Jak dlouho AI kontrola trvá?
Než je sezení zkontrolováno, může od konce zkoušky trvat až tři hodiny. Lidský live proctoring naproti tomu poskytuje výsledek okamžitě už během zkoušky.
Odesílají se záznamy zkoušek externí AI?
Ne. Detekční modely hostujeme a provozujeme sami. Snímky z webkamery ani záznamy obrazovky se neodesílají žádnému externímu poskytovateli AI.
Proč je AI proctoring levnější než live proctoring?
U každého sezení nemusí být přítomen proctor, a proto jsou náklady na jedno sezení nižší než u lidské kontroly nebo lidského live proctoringu.
Zvládne AI proctoring pokrýt více účastníků než live proctoring?
Ano. Protože nezávisí na proctorech sledujících zkoušku v reálném čase, lze jej použít pro více účastníků současně než náš live proctoring.