Posso confiar em um teste feito em casa?

24 de agosto de 2020     

Quando a pandemia de coronavírus fechou os centros de teste ao redor do mundo, a demanda por uma solução virtual para avaliações de alto risco foi essencial. Sabíamos que nossos candidatos precisavam de uma solução imediata para concluir seus exames, a fim de cumprir prazos críticos em suas trajetórias educacionais e profissionais.

Em apenas seis semanas, fomos os primeiros do setor a entregar uma solução supervisionada remotamente, com colaboração do líder do setor, ProctorU^®, para o GRE^® General Test e o teste TOEFL iBT, e desde então expandimos nossas ofertas para incluir o exame HiSET^® e os testes Praxis^®. Tanto os examinadores quanto os usuários de pontuação institucionais confiam em nossas avaliações para fornecer uma medida precisa e confiável do que os candidatos sabem e podem fazer — portanto, manter a segurança e a integridade dos resultados continua sendo tão importante quanto utilizar o método correto de entrega.^®

Mas como você pega estratégias construídas em torno de décadas de testes presenciais e as move para o online, de forma segura, tudo isso em poucas semanas?

A ETS tem ampla experiência modernizando formatos de avaliação. Ao migrar para soluções remotas, simplesmente voltamos ao básico, integrando protocolos rigorosos e pesquisas extensas sobre o comportamento dos candidatos com tecnologia de ponta. Fazemos grandes esforços para garantir a mais alta qualidade de nossas avaliações e para evitar riscos. Aqui estão apenas algumas das formas como garantimos a segurança dos testes durante nossos exames em casa:

Verificação de Identidade

Antes do início do exame, a identidade dos candidatos é verificada para garantir que o candidato que comparecer para concluir corresponda ao nome do registro. Isso ajuda a desencorajar os 'profissionais' de concluir o teste e comprometer o material do teste. As fotos dos candidatos são comparadas com sua identificação oficial emitida pelo governo. Durante todo o teste, a inteligência artificial (IA) é usada para garantir que o mesmo candidato permaneça no assento e para evitar a entrada de uma segunda pessoa na sala. Para os testes, incluindo o teste TOEFL iBT, também utilizamos biometria de voz para relacionar a voz do candidato às gravações arquivadas, a fim de evitar trapaças e identificar possíveis casos de personificação.

Varredura Ambiental

Antes de os candidatos iniciarem o exame, os supervisores remotos realizam uma análise detalhada e 360 graus do espaço do teste usando uma câmera web para garantir que o candidato está sozinho e que não haja dispositivos ou materiais suspeitos presentes. Essa conexão permanece ativa durante toda a sessão e é gravada do início ao fim, para que a equipe do ETS também possa assistir ao candidato ao vivo ou em vídeo em outro momento. A equipe da ProctorU monitora diligentemente comportamentos ou movimentos incomuns. O supervisor também escaneia o dispositivo do candidato em busca de softwares e navegadores abertos ou operando no computador, para garantir que nenhum software não autorizado esteja rodando ativamente em segundo plano durante o teste.

Inteligência Artificial

Combinando a diligência humana com IA e dados de processos, o fiscal é suportado por tecnologia que escaneia continuamente irregularidades, reforçando e avançando a supervisão do fiscal. O fiscal tem acesso visual total tanto à tela do candidato quanto à observação visual dele via webcam. O teste pode ser cancelado imediatamente se houver qualquer tentativa de colar, abrir um novo navegador, usar softwares ou dispositivos não autorizados ou se comunicar com outras pessoas durante o teste.

Análise de Dados de Processo

Em estreita parceria com nossos analistas de dados de Pesquisa e Desenvolvimento e psicometristas, analisamos toda a atividade de testes e processamos os dados coletados ao longo de cada sessão para identificar padrões e aberrações que possam ajudar a detectar comportamentos suspeitos ao longo do tempo. Esses dados são críticos não apenas para a confiabilidade dos testes, mas também para entender o comportamento dos candidatos, para que possamos atualizar consistentemente a tecnologia que utilizamos para garantir a segurança dos exames e a privacidade dos candidatos.

Nossa transição para o teste remoto, nos deu a oportunidade de aprender, evoluir e continuar encontrando nossos candidatos onde eles estão. Centenas de milhares de candidatos concluíram com sucesso nossos exames em casa para continuar suas jornadas educacionais e profissionais. Ao continuar integrando nossa expertise profunda construída ao longo dos anos na área com tecnologias emergentes, continuaremos aprimorando nossas capacidades e aprimorando a experiência dos nossos examinadores.

Ray Nicosia é diretor executivo do Escritório de Integridade dos Testes da ETS.