Certifique o seu inglês com o Duolingo English Test! O nosso teste online é aceito por milhares de universidades em todo o mundo e pode ser feito onde e quando você quiser.
Muita gente pergunta: o DET é fiscalizado? A resposta curta é: sim! Mas a resposta completa é bem mais complexa.
Esse tópico gera uma certa confusão, e entendemos por quê. A maioria das pessoas só tem familiaridade com os exames que elas mesmas fizeram no passado, e muita coisa mudou nos últimos anos!
Com a pandemia, diversos locais foram fechados, e muitos testes de alto impacto que costumavam ser realizados em centros de provas, como o SAT e o TOEFL, estão fazendo a transição para o ambiente online. Enquanto isso, exames inteiramente digitais, como o Duolingo English Test (DET), já foram criados para serem feitos sob demanda.
A mudança para testes digitais faz muita gente questionar se eles conseguem se proteger de condutas inadequadas — é aí que entra a fiscalização. Mas, se o teste não é presencial, como essas fiscalização é feita? Ótima pergunta! Vamos começar com…
O que é fiscalização?
Fiscalizar significa observar uma pessoa para garantir que ela não tente agir de má-fé enquanto faz um teste. Os exames tradicionais que são aplicados em centros de provas utilizam fiscalização ao vivo, ou seja, existe alguém responsável por supervisionar um grupo de candidatos fazendo o teste juntos em uma sala ao longo de várias horas.
Essa ideia não faz muito sentido para exames inteiramente digitais, como o DET. Eles são feitos online, sob demanda, 24 horas por dia, no mundo todo, então não seria eficiente ter alguém de prontidão para fiscalizar todas as sessões pessoalmente em tempo real. Mas acontece que esse tipo de fiscalização tem algumas desvantagens. Aliás, quando começamos a desenvolver o Duolingo English Test, uma das primeiras coisas que nos perguntamos foi…
Será que a fiscalização ao vivo é o melhor jeito de monitorar um teste?
A fiscalização ao vivo depende de uma corrente de confiança composta por dezenas de humanos, em que problemas em um único ponto podem ter impacto em toda a cadeia. Várias pessoas participam na distribuição, aplicação, fiscalização e avaliação do teste, e qualquer uma delas pode agir de má-fé e comprometer a segurança do exame de muitas e muitas formas.
Sessões de teste presenciais não são gravadas. Como é impossível um único fiscal prestar atenção em todos os candidatos ao mesmo tempo, cada candidato é observado apenas parcialmente enquanto realiza o teste. Não existem registros de vídeo ou de áudio dos exames sendo aplicados — o que significa que não existem evidências do comportamento dos candidatos, a não ser a narrativa do fiscal, com base na sua memória.
Os fiscais e os candidatos estão na mesma sala, então não existe anonimato. Isso é um risco por algumas razões. Como muitas vezes as pessoas que aplicam o exame e as que fiscalizam estão na mesma cidade, existe a chance de que elas conspirem para quebrar as regras de segurança do teste. A mídia já divulgou diversos casos em que a segurança na aplicação de testes foi diminuída por conta de equipes de aplicação subornadas e grupos organizados de candidatos se ajudando no mesmo local.
Os testes são aplicados em grupos, por isso não existe uma forma precisa de distinguir as pessoas honestas das pessoas que tentam quebrar as regras. Assim, alguém que fraudou a prova pode passar despercebido e alguém que foi honesto pode acabar sendo acusado de mau comportamento. Se apenas um candidato trapacear, isso pode invalidar a pontuação de toda a sala.
Voltando ao DET, o nosso modelo não inclui fiscalização ao vivo. Mas também é verdade que esse tipo de fiscalização não oferece o monitoramento completo de testes realizados no meio digital, ou mesmo presencialmente.
Quem fiscaliza o Duolingo English Test?
A nossa equipe de fiscais conta com centenas de pessoas ao redor do mundo e se divide em três níveis, sendo que cada um é responsável por uma camada importante da segurança.
Os fiscais do primeiro nível são altamente qualificados na verificação de identidade e na detecção de diversos comportamentos potencialmente suspeitos dos candidatos. Além de terem um treinamento em segurança similar a esse, os fiscais do segundo nível também são profissionais de inglês como segunda língua (ESL, na sigla em inglês) e passam a maior parte do tempo revisando a parte de entrevista do teste. Os fiscais do terceiro nível são membros de grau sênior da equipe, que possuem conhecimento especializado em ESL e também habilidades de segurança avançada. Eles revisam os casos mais complexos.
Ao contratar fiscais, procuramos pessoas que demonstram atenção aos detalhes e capacidade de avaliação comportamental. Após a contratação, eles passam por um longo treinamento que envolve a revisão de processos ao vivo, trabalhando lado a lado com um mentor experiente (que é um fiscal sênior) e recebendo feedback detalhado. Os nossos fiscais do segundo e terceiro níveis também são avaliados para garantirmos que são especialistas em ESL. Todos os fiscais de qualquer nível passam por várias semanas de treinamento antes de revisar testes sozinhos.
Como o Duolingo mantém os testes digitais seguros?
Você pode pensar no nosso sistema como uma fiscalização reforçada. Como parte da nossa abordagem de desenvolvimento de testes inteiramente digitais, combinamos a experiência humana com o poder da inteligência artificial para ter uma perspectiva abrangente do monitoramento de exames.
Em vez de serem observadas por uma pessoa em tempo real, todas as sessões de teste são gravadas por meio do computador, microfone, teclado e mouse. Em seguida, para serem validadas, elas são revisadas em várias etapas por profissionais treinados. Só depois de tudo isso um candidato pode receber uma pontuação certificada.
Os fiscais avaliam as sessões de forma assíncrona e remota, e eles não conhecem a identidade dos candidatos nem a dos outros fiscais participantes do processo de revisão; assim, os candidatos não conseguem influenciar ou coagi-los. Cada sessão é isolada, por isso uma tentativa individual de colar não invalida pontuações de outros candidatos. Como cada sessão é gravada, existem mais evidências disponíveis para determinar se houve conduta inadequada, e essas evidências podem ser observadas e avaliadas por múltiplos fiscais anônimos.
A aplicação dos testes já mudou muito, e a segurança também. Com os avanços na avaliação e na tecnologia de aprendizado de máquina, podemos aplicar exames com muito mais agilidade e para muito mais pessoas via plataforma digital. É natural que a revisão das provas também evolua, e o Duolingo English Test é sempre pioneiro quando se trata de inovação em testes!
