AI proctoring — pengawasan ujian otomatis dalam skala besar

Apa yang sebenarnya dilakukan AI proctoring

AI proctoring mengawasi tayangan webcam selama ujian berlangsung dan, apabila pengawasan layar diaktifkan, juga layar yang dibagikan. Sistem ini mencari jenis anomali yang akan membuat seorang pengawas memperhatikan lebih saksama — wajah lain yang muncul di kamera, peserta yang meninggalkan bingkai kamera, atau gangguan pada pola audio dan video normal sebuah sesi ujian. Sistem ini juga menangani verifikasi identitas pada awal sesi dengan mencocokkan peserta terhadap dokumen identitas — pemeriksaan yang sama seperti yang tersedia dengan pengawas manusia. Apabila tidak ada hal yang tidak biasa terjadi, tidak ada yang terjadi: tidak ada yang mengawasi secara real time, dan ujian berjalan tanpa gangguan.

Di situlah pula batasnya. AI proctoring menandai; ia tidak menilai. Sistem ini tidak dapat membedakan peserta yang meraih segelas air dari peserta yang meraih ponsel, sehingga keduanya ditandai dan pembedaannya diserahkan kepada manusia — sistem ini tidak pernah mengeluarkan seseorang dari ujian atau memutuskan sendiri bahwa telah terjadi pelanggaran. Keputusan itu berada pada penyelenggara ujian, berdasarkan penilaian peninjau manusia atas momen yang ditandai. Karena sistem ini tidak memiliki pemahaman situasional atas sebuah ruangan sebagaimana pengawas manusia yang mengamati secara real time, AI proctoring lebih cocok untuk pengujian bervolume tinggi dengan tingkat risiko rutin dibandingkan ujian di mana keputusan yang keliru berbiaya mahal. Untuk ujian semacam itu, human proctoring, atau kombinasi keduanya, merupakan titik awal yang lebih baik.

Bagaimana penandaan dan tinjauan manusia sebenarnya bekerja

Penandaan berlangsung secara otomatis selama ujian, tanpa ada seorang pun yang mengawasi secara langsung — dan justru di situlah letak penghematan biayanya. Ketika sistem memunculkan sebuah tanda, sistem tidak mengambil kesimpulan sendiri: momen tersebut dimasukkan ke dalam antrean yang ditangani oleh anggota staf dukungan PRUEFSTER yang terlatih. Ini adalah tim dukungan yang sama seperti pada human proctoring — dukungan tidak berubah tergantung produk yang Anda beli, yang berbeda hanyalah apakah seorang proctor turut mengawasi secara langsung.

Tinjauan dilakukan setelah ujian, bukan selama ujian berlangsung. Itulah sebabnya perbandingan di atas menandai upaya tinjauan pascaujian pada AI proctoring sebagai lebih tinggi: tetap ada orang yang harus melihat apa yang ditandai, hanya saja kemudian, bukan saat itu juga. Peninjau menonton klip yang ditandai, memutuskan apakah hal itu perlu dieskalasi, dan jika ya, menyusun laporan mengenai apa yang terjadi agar penyelenggara ujian dapat menindaklanjutinya. Sebagian besar tanda ternyata bukan apa-apa — seseorang meregangkan tubuh, bayangan yang melintas di depan webcam, koneksi yang terputus sesaat — dan ditutup tanpa tindakan lebih lanjut. Sisanya mendapat perhatian dari staf terlatih yang sama seperti yang akan diberikan proctor langsung pada saat kejadian, hanya saja dengan penundaan.

Inilah alasan AI proctoring cocok dipadukan dengan human proctoring sesekali, atau dengan pemindaian ruangan 360° untuk ujian yang risikonya memang menuntut hal tersebut: penandaan menangkap apa yang terjadi, tetapi tetap dibutuhkan seseorang untuk memutuskan apa artinya.