Avaliação das Qualificações em Língua Inglesa: Como o TOEFL iBT® atende aos Principais Padrões de Avaliação do Inglês

No Reino Unido, a BUILA (Associação Internacional de Ligação das Universidades Britânicas) e a BALEAP (Associação Britânica de Professores de Inglês para fins acadêmicos) são duas organizações profissionais que colaboram em questões relacionadas ao recrutamento de estudantes internacionais e ao uso do inglês em ambientes acadêmicos.

Recentemente, a BUILA, que representa os escritórios internacionais das universidades britânicas, e a BALEAP, um grupo que apoia professores e pesquisadores, uniram forças para oferecer um conjunto de recomendações sobre a medição da eficácia de um teste de inglês acadêmico.

Esta publicação, Guia de Boas Práticas da Língua Inglesa: Testando Qualificações e Inglês para Fins Acadêmicos no Ensino Superior, oferece orientações práticas para universidades que buscam garantir que estudantes internacionais tenham habilidades acadêmicas suficientes em inglês para ter sucesso em salas de aula modernas.

A Seção 1 do Guia, "Avaliação das Qualificações em Língua Inglesa", levanta algumas questões-chave sobre a qualidade geral dos testes que as instituições de ensino superior devem considerar antes de aceitar um teste de inglês. Neste artigo, compartilhamos como o TOEFL iBT aborda cada questão fundamental levantada por esta valiosa orientação BUILA-BALEAP.

O TOEFL iBT se baseia em mais de seis décadas de pesquisa em avaliação em inglês para medir as habilidades essenciais de comunicação que os estudantes devem usar nos ambientes acadêmicos atuais. Exemplos de como o conteúdo do TOEFL reflete as demandas linguísticas e de comunicação dos contextos acadêmicos e profissionais modernos incluem: 

• Leitura de trechos relevantes em ambientes acadêmicos, como livros didáticos, jornais e revistas
• Uma amostra de artigos em sites e postagens em redes sociais que oferecem uma estrutura relevante para testar a compreensão de significados implícitos, opiniões e outros aspectos pragmáticos da comunicação que são vitais nas salas de aula de hoje
• Palestras acadêmicas e palestras (entrada monológica), assim como interações em grupo (entrada dialógica) relevantes em ambientes dinâmicos de sala de aula e ambientes de aprendizagem experiencial
• Respostas escritas para situações comuns, como escrever um e-mail para um professor ou colega, assim como para uma discussão acadêmica online (exigindo a síntese de contribuições tanto de um professor quanto de outros estudantes)
• Uma entrevista com um interlocutor simulado – no contexto de uma interação acadêmica

Cada tarefa individual no TOEFL iBT trabalha em conjunto com as outras tarefas de cada seção para abordar uma variedade de habilidades relevantes, permitindo obter medições precisas e úteis da habilidade de leitura, escuta, escrita e fala em cada seção do teste.

Pesquisas independentes mostraram, para usar um exemplo, que as tarefas de Speaking no TOEFL iBT são ótimos indicadores de desempenho em tipos típicos de fala acadêmica. Esse, claro, continua sendo o objetivo central de uma avaliação de inglês de alto risco como o TOEFL.

Outro exemplo dessa abordagem holística de medição: Em nossa seção de Escuta, uma variedade de tipos de tarefas desempenham funções diferentes e apresentam diferentes tipos (e duração) de entrada. Essas tarefas permitem a medição de muitas habilidades (por exemplo, capacidade de entender significados implícitos), contextos (por exemplo, interação profissional e acadêmica) e gêneros (por exemplo, conversas; palestras).

Mas uma análise mais detalhada dos tipos individuais de itens também mostra a representatividade da comunicação acadêmica que os alunos encontrarão em ambientes do mundo real. Mais exemplos são oferecidos abaixo.

• Na seção de Leitura, Leia uma Passagem Acadêmica oferece uma visão sobre a capacidade do estudante de obter informações e compreender o significado de textos complexos, como é comumente esperado em estudos acadêmicos.
• Na seção de Redação, Escrever para uma Discussão Acadêmica, que ocorre no contexto de uma discussão em sala de aula provocada por um instrutor, pede que o aluno expresse suas próprias opiniões, apoiadas por raciocínio, conhecimento ou experiência relevantes. Espera-se também que os alunos respondam às contribuições dos colegas.
• Faça uma Entrevista, uma das duas tarefas de Oração, pede aos alunos que participem de uma conversa simulada com um entrevistador pré-gravado. A entrevista ocorre em diversas situações acadêmicas, como participação em um estudo de pesquisa. As perguntas iniciais focam em informações factuais e experiências pessoais; as perguntas posteriores pedem que os alunos expressem e apoiem opiniões sobre questões mais amplas.
• Na seção de Escuta, nossa tarefa de Palestra Acadêmica mede a capacidade do aluno de entender uma aula monológica. Essa tarefa é usada em conjunto com tarefas como Ouvir uma Conversa para medir a capacidade do aluno de ter sucesso em ambientes modernos de sala de aula, onde participar ativamente de discussões em grupo é frequentemente tão importante quanto ouvir unilateralmente em um auditório.

Engajar uma ampla gama de processos cognitivos – não apenas compreensão ou recordação superficiais – permanece no centro do design do TOEFL. As tarefas do TOEFL iBT também testam operações cognitivas, como análise, síntese e pensamento crítico, que são esperadas em ambientes acadêmicos rigorosos – globalmente e no Reino Unido.

Para começar, as tarefas de Escrita no TOEFL atual envolvem uma ampla gama de processos cognitivos, incluindo microplanejamento, macroplanejamento, monitoramento e síntese de informações.

As tarefas de leitura do TOEFL medem processos cognitivos como compreensão do vocabulário acadêmico, integração de informações textuais entre frases, inferir a situação implícita em um texto, compreender o ponto de vista do autor e inferir o significado da linguagem figurativa.

A compreensão oral do TOEFL avalia a capacidade do aluno de identificar ideias principais e detalhes de apoio, derivar relações entre ideias, tirar inferências, entender o propósito e a atitude do falante e processar recursos de fala e organização estendidos. Os alunos também devem utilizar informações fonológicas, significados lexicais e gramaticais, e informações pragmáticas.

E o TOEFL Speaking mede a capacidade de processar e produzir rapidamente a linguagem falada, planejar e organizar uma resposta falada, avaliar e formar uma opinião, e criar um argumento estruturado. Também requer estratégias metacognitivas (como monitorar a pronúncia enquanto fala) e gerenciamento do discurso (controlar o ritmo e a entonação; usar transições).

Sim, o teste avalia as quatro habilidades linguísticas — leitura, escuta, escrita e fala — como componentes separados. Ao mesmo tempo, as tarefas do teste exigem que os candidatos combinem múltiplas habilidades de inglês, como compreensão auditiva ou leitura, para fornecer respostas faladas ou escritas às perguntas do teste de forma eficaz. 

Essa integração entre as habilidades linguísticas torna essas tarefas de teste ferramentas vitais para medir a proficiência em inglês dos candidatos.

Desde o desenvolvimento de itens e tarefas até o desenvolvimento e avaliação da pontuação, o teste iBT do TOEFL está fortemente alinhado a cada um dos níveis do CEFR. Primeiro, os níveis do CEFR são parte integrante do desenvolvimento e alinhamento direcionados dos itens como evidência das alegações e declarações de "possa-fazer", conforme articulado nas Especificações do Teste.

O desenvolvimento da escala de pontuação por faixas (1-6) também reflete cada um dos seis níveis do CEFR (A1-C2). A escala tem o benefício adicional de consistência e facilidade de interpretação, pois as mesmas pontuações são fornecidas nas quatro pontuações das seções do teste, assim como na pontuação geral (que é a média arredondada das pontuações das seções). Por exemplo, uma pontuação 4 está alinhada com o nível B2 do CEFR para Leitura, Escuta, Escrita, Fala, além da pontuação geral.

O desenvolvimento da escala foi multifacetado e incluiu metodologias de mapeamento, incluindo ligação vertical, avaliação de conteúdo e alinhamento entre tarefas e descritores CECR, além de definição de padrões. Como os tipos de tarefas e o número de itens disponíveis em cada seção de teste variam, a metodologia para mapear as pontuações dos testes aos níveis do CEFR também variou para as seções de teste avaliando habilidades linguísticas receptivas e para as seções avaliando habilidades produtivas de idioma.

Esses métodos são descritos em um artigo científico, que documenta ainda como o teste TOEFL iBT reflete as habilidades associadas à proficiência em inglês conforme descrito nos níveis do CEFR, do A1 ao C2. Pesquisas independentes para apoiar esses esforços na edição mais recente do TOEFL iBT estão planejadas e se beneficiarão de dados operacionais como evidência de verificação.