Solução

Proctoring por IA: análise automática das sessões de exame gravadas

Modelos de deteção alojados nos nossos próprios servidores verificam cada sessão de exame gravada quanto a saídas da sala por parte do participante, presença de outras pessoas na webcam e utilização de chatbots como o ChatGPT no ecrã partilhado, classificando depois a sessão como verde, amarela ou vermelha. Custo inferior ao da análise humana ou do proctoring ao vivo, mais participantes em simultâneo e resultados até três horas após o exame.

Marcar uma demonstração
Screen Share

O que faz, na prática, o proctoring por IA da PRUEFSTER

O proctoring por IA da PRUEFSTER consiste numa análise automática da gravação do exame. Durante o exame, a webcam do participante e, quando esta opção está ativada, o ecrã partilhado são gravados como em qualquer outro exame realizado com a PRUEFSTER. Terminado o exame, os nossos modelos de deteção percorrem essa gravação à procura de três tipos de ocorrência: a saída do participante da sala, o aparecimento de outra pessoa na imagem da webcam e a utilização de um chatbot como o ChatGPT na partilha de ecrã.

Cada deteção é assinalada com a respetiva posição na gravação. Com base nas deteções efetuadas, a IA classifica em seguida a sessão completa como verde, amarela ou vermelha. É esta classificação tipo semáforo que a entidade examinadora vê em primeiro lugar, pelo que as sessões que exigem uma análise mais atenta se distinguem de imediato das restantes.

Os modelos responsáveis por esta análise são executados na infraestrutura da própria PRUEFSTER. As imagens da webcam e as gravações de ecrã nunca são enviadas para um fornecedor de IA externo; a deteção decorre em sistemas que alojamos e operamos nós próprios.

Análise por IA vs. proctoring humano ao vivo

Proctoring por IAProctoring humano ao vivo
Custo por sessãoMais baixoMais elevado
Participantes em simultâneoMaisMenos
Momento em que o resultado fica disponívelAté 3 horas após o exameDe imediato, durante o exame
O que recebeClassificação verde / amarela / vermelha com as deteções assinaladasObservação ao vivo por um supervisor
Onde decorre a análiseModelos de deteção alojados pela PRUEFSTERSupervisores da PRUEFSTER ou da sua própria equipa

As vantagens da análise por IA

Custo mais baixo

Sem horas de trabalho humano por sessão — mais económico do que a análise humana ou o proctoring humano ao vivo.

Mais participantes em simultâneo

Não depende do número de supervisores disponíveis, pelo que é possível cobrir muito mais sessões ao mesmo tempo.

Três tipos de deteção

Saídas da sala por parte dos participantes, presença de outras pessoas na imagem da webcam e chatbots como o ChatGPT na partilha de ecrã.

Verde, amarelo, vermelho

Cada sessão recebe uma classificação inequívoca, com base nas deteções efetuadas.

Deteção em infraestrutura própria

Os modelos funcionam na nossa própria infraestrutura. As imagens nunca são enviadas para uma IA externa.

Resultados em poucas horas

Cada sessão é analisada até três horas após o fim do exame.

Como funciona a análise por IA e quando optar por ela

A análise decorre após o exame e não durante o mesmo. Assim que uma sessão termina, a respetiva gravação é entregue aos modelos de deteção. Podem passar até três horas após o exame até que uma sessão esteja analisada e a sua classificação disponível. Esta é a principal contrapartida face ao proctoring ao vivo com supervisores humanos, em que um supervisor acompanha o exame em tempo real e o resultado surge de imediato.

Uma vez que não é necessária a presença de um supervisor em cada sessão, a análise por IA consegue abranger muitos mais participantes em simultâneo do que o nosso proctoring ao vivo e tem um custo por sessão inferior ao da análise humana ou do proctoring ao vivo com supervisores humanos. É, por isso, a solução indicada para exames de grande volume, nos quais uma classificação disponível ao fim de algumas horas é suficientemente rápida.

Se os seus exames exigem que alguém reaja enquanto o participante ainda se encontra na sessão, o proctoring ao vivo com supervisores humanos é a ferramenta certa. Se necessita de uma classificação consistente de todas as sessões em grande escala e pode esperar até três horas por ela, o proctoring por IA é a opção mais económica.

Solutions Graphic
A análise por IA decorre após o exame: a classificação verde, amarela ou vermelha de uma sessão fica disponível até três horas depois de esta terminar.
Até uma sessão ser analisada após o exame
≤ 3 h
Imagens enviadas a fornecedores de IA externos
0
Níveis de classificação: verde, amarelo, vermelho
3
Graças à colaboração com a PRUEFSTER, conseguimos permitir que muitos candidatos participassem em testes de aptidão específicos da área, apesar das restrições decorrentes da pandemia. A PRUEFSTER esteve sempre disponível para nós e apoiou-nos igualmente de forma muito significativa na organização dos procedimentos.
Hans-Jörg Didi · Sócio · ITB Consulting GmbH

Perguntas frequentes

O que deteta o proctoring por IA da PRUEFSTER?

Três tipos de ocorrência: a saída do participante da sala, o aparecimento de outra pessoa na imagem da webcam e a utilização de um chatbot como o ChatGPT na partilha de ecrã.

Como são apresentados os resultados?

Cada sessão é classificada como verde, amarela ou vermelha com base nas deteções efetuadas pela IA, para que as sessões que exigem uma análise mais atenta se destaquem de imediato.

Quanto tempo demora a análise por IA?

Podem passar até três horas após o exame até que uma sessão esteja analisada. Em comparação, o proctoring ao vivo com supervisores humanos apresenta o resultado de imediato, durante o exame.

As gravações dos exames são enviadas para uma IA externa?

Não. Alojamos e executamos os modelos de deteção nos nossos próprios sistemas. As imagens da webcam e as gravações do ecrã não são enviadas a nenhum fornecedor de IA externo.

Porque é que o proctoring por IA é mais económico do que o proctoring ao vivo?

Não é necessária a presença de um supervisor em cada sessão, pelo que o custo por sessão é inferior ao da análise humana ou do proctoring ao vivo com supervisores humanos.

O proctoring por IA consegue abranger mais participantes do que o proctoring ao vivo?

Sim. Como não depende de supervisores a acompanhar em tempo real, pode ser utilizado para mais participantes em simultâneo do que o nosso proctoring ao vivo.

Veja a análise por IA aplicada aos seus próprios exames

Marcar uma demonstração