Avaliação das Qualificações em Língua Inglesa: Como o TOEFL iBT® atende aos Principais Padrões de Avaliação do Inglês

No Reino Unido, a BUILA (Associação Internacional de Ligação das Universidades Britânicas) e a BALEAP (Associação Britânica de Professores de Inglês para fins acadêmicos) são duas organizações profissionais que colaboram em questões relacionadas ao recrutamento de estudantes internacionais e ao uso do inglês em ambientes acadêmicos.

Recentemente, a BUILA, que representa os escritórios internacionais das universidades britânicas, e a BALEAP, um grupo que apoia professores e pesquisadores, uniram forças para oferecer um conjunto de recomendações sobre a medição da eficácia de um teste de inglês acadêmico.

Esta publicação, Guia de Boas Práticas da Língua Inglesa: Testando Qualificações e Inglês para Fins Acadêmicos no Ensino Superior, oferece orientações práticas para universidades que buscam garantir que estudantes internacionais tenham habilidades acadêmicas suficientes em inglês para ter sucesso em salas de aula modernas.

A Seção 1 do Guia, "Avaliação das Qualificações em Língua Inglesa", levanta algumas questões-chave sobre a qualidade geral dos testes que as instituições de ensino superior devem considerar antes de aceitar um teste de inglês. Neste artigo, compartilhamos como o TOEFL iBT aborda cada questão chave levantada por esta valiosa orientação do BUILA-BALEAP.

O TOEFL IBT SE BASEIA EM MAIS DE SEIS DÉCADAS DE PESQUISA EM AVALIAÇÃO EM INGLÊS PARA MEDIR AS HABILIDADES ESSENCIAIS DE COMUNICAÇÃO QUE OS ESTUDANTES DEVEM USAR NOS AMBIENTES ACADÊMICOS ATUAIS. Exemplos de como o conteúdo do TOEFL reflete as demandas linguísticas e de comunicação dos contextos acadêmicos e profissionais modernos incluem: 

• Leitura de trechos relevantes em ambientes acadêmicos, como livros didáticos, jornais e revistas
• Uma amostra de artigos em sites e postagens em redes sociais que oferecem uma estrutura relevante para testar a compreensão de significados implícitos, opiniões e outros aspectos pragmáticos da comunicação que são vitais nas salas de aula de hoje
• Palestras acadêmicas e palestras (entrada monológica), assim como interações em grupo (entrada dialógica) relevantes em ambientes dinâmicos de sala de aula e ambientes de aprendizagem experiencial
• Respostas escritas para situações comuns, como escrever um e-mail para um professor ou colega, assim como para uma discussão acadêmica online (exigindo a síntese de contribuições tanto de um professor quanto de outros estudantes)
• Uma entrevista com um interlocutor simulado – no contexto de uma interação acadêmica

Cada tarefa individual no TOEFL iBT trabalha em conjunto com as outras tarefas de cada seção para abordar uma variedade de habilidades relevantes, permitindo obter medições precisas e úteis da habilidade de leitura, escuta, escrita e fala em cada seção do teste.

Pesquisas independentes mostraram, para usar um exemplo, que as tarefas de Speaking no TOEFL iBT são indicadores muito bons de desempenho em tipos típicos de fala acadêmica. Esse, claro, continua sendo o objetivo central de uma avaliação de inglês de alto risco como o TOEFL.

Outro exemplo dessa abordagem holística de medição: em nossa seção de Ouvir, uma variedade de tipos de tarefas realiza funções diferentes e apresenta diferentes tipos (e duração) de entrada. Essas tarefas permitem medir muitas habilidades (por exemplo, capacidade de entender significados implícitos), contextos (por exemplo, interação profissional e acadêmica) e gêneros (por exemplo, conversas; palestras).

Mas uma análise mais detalhada dos tipos individuais de itens também mostra sua representatividade da comunicação acadêmica que os alunos encontrarão em ambientes do mundo real. Mais exemplos são oferecidos abaixo.

• Na seção de Leitura, Leia uma Passagem Acadêmica oferece uma visão sobre a capacidade do estudante de obter informações e compreender o significado de textos complexos, como é comumente esperado em estudos acadêmicos.
• Na seção de Redação, Escrever para uma Discussão Acadêmica, que ocorre no contexto de uma discussão em aula provocada por um instrutor, pede que o aluno expresse suas próprias opiniões, apoiadas por raciocínio, conhecimento ou experiência relevantes. Espera-se também que os alunos respondam às contribuições dos colegas.
• Faça uma Entrevista, uma das duas tarefas de Palestra, pede aos alunos que participem de uma conversa simulada com um entrevistador pré-gravado. A entrevista ocorre em diversas situações acadêmicas, como participar de um estudo de pesquisa. As perguntas iniciais focam em informações factuais e experiências pessoais; Perguntas posteriores pedem que os alunos expressem e apoiem opiniões sobre questões mais amplas.
• Na seção de Compreensão Auditiva, nossa tarefa de Palestra Acadêmica mede a capacidade do aluno de entender uma aula monológica. Essa tarefa é usada em conjunto com tarefas como Ouça uma Conversa para medir a capacidade do aluno de ter sucesso em ambientes modernos de sala de aula, onde participar ativamente de discussões em grupo é frequentemente tão importante quanto ouvir unilateralmente em um auditório.

Envolver uma ampla gama de processos cognitivos – não apenas compreensão ou recordação superficiais – continua sendo o cerne do design do TOEFL. As tarefas do TOEFL iBT também testam operações cognitivas, como análise, síntese e pensamento crítico, que são esperadas em ambientes acadêmicos rigorosos – globalmente e no Reino Unido.

Para começar, as tarefas de Escrita no TOEFL atual envolvem uma ampla gama de processos cognitivos, incluindo microplanejamento, macroplanejamento, monitoramento e síntese de informações.

As tarefas de leitura do TOEFL medem processos cognitivos como compreensão do vocabulário acadêmico, integração de informações textuais entre frases, inferir a situação implícita em um texto, compreender o ponto de vista do autor e inferir o significado da linguagem figurativa.

A Escuta TOEFL testa a capacidade do aluno de identificar ideias principais e detalhes de apoio, derivar relações entre ideias, tirar inferências, entender o propósito e a atitude do orador e processar dispositivos de fala e organização estendidos. Os alunos também devem utilizar informações fonológicas, significados lexicais e gramaticais, e informações pragmáticas.

E o TOEFL Speaking mede a capacidade de processar e produzir rapidamente a linguagem falada, planejar e organizar uma resposta falada, avaliar e formar uma opinião, e criar um argumento estruturado. Também requer estratégias metacognitivas (como monitorar a pronúncia ao falar) e gerenciamento do discurso (controlar o ritmo e a entonação; usar transições).

Sim, o teste avalia as quatro habilidades linguísticas — leitura, escuta, escrita e fala — como componentes separados. Ao mesmo tempo, as tarefas de teste exigem que os candidatos combinem múltiplas habilidades de inglês, como escuta ou leitura, para fornecer respostas faladas ou escritas às perguntas de forma eficaz. 

Essa integração entre as habilidades linguísticas torna essas tarefas de teste ferramentas vitais para medir a proficiência em inglês dos candidatos.

Desde o desenvolvimento de itens e tarefas até o desenvolvimento da pontuação e avaliação, o teste TOEFL iBT está fortemente alinhado a cada um dos níveis do CEFR. Primeiro, os níveis do CEFR são essenciais para o desenvolvimento e alinhamento direcionados dos itens como evidência para as alegações e declarações de "possa-fazer", conforme articulado nas Especificações de Teste.

O desenvolvimento da escala de pontuação faixosa (1-6) também reflete cada um dos seis níveis do CECR (A1-C2). A escala tem o benefício adicional de consistência e facilidade de interpretação, pois as mesmas pontuações são fornecidas nas quatro pontuações das seções de teste, assim como a pontuação geral (que é a média arredondada das pontuações das seções). Por exemplo, uma pontuação de 4 está alinhada com o nível B2 do CEFR em Leitura, Escuta, Escrita, Fala, além da pontuação geral.

O desenvolvimento em escala foi multifacetado e incluiu metodologias de mapeamento, incluindo ligação vertical, avaliação de conteúdo e alinhamento entre tarefas e descritores CEFR, além de definição de padrões. Como os tipos de tarefas e o número de itens disponíveis em cada seção de teste variam, a metodologia para mapear as pontuações dos testes aos níveis do CECR também variou para as seções de teste que avaliam habilidades linguísticas receptivas e para as seções avaliando habilidades linguísticas produtivas.

Esses métodos são descritos em um artigo científico, que documenta ainda como o teste TOEFL iBT reflete as habilidades associadas à proficiência em inglês conforme descrito nos níveis do CEFR, de A1 a C2. Pesquisas independentes para apoiar esses esforços na última edição do TOEFL iBT estão planejadas e se beneficiarão de dados operacionais como evidência de verificação.