Este artigo descreve as motivações por trás do design das avaliações TOEIC Bridge redesenhadas para medir as quatro habilidades de comunicação, os propósitos das avaliações e como definimos a proficiência em inglês em audição, leitura, fala e escrita em contextos cotidianos para aprendizes básicos a intermediários. Essas informações fornecem uma base para o desenvolvimento de testes e subsequentes pesquisas de validade.

Leia mais

Os testes TOEIC Bridge redesenhados foram desenvolvidos usando uma metodologia de desenvolvimento de avaliação chamada desenho centrado em evidências (ECD). Este artigo documenta como a ECD foi usada para projetar tarefas que evidenciaram a proficiência em inglês dos candidatos em níveis básicos a intermediários, e como diversas fontes de dados obtidas ao longo do processo de desenvolvimento influenciaram as decisões de design de itens e testes.

Leia mais

Este artigo relata os resultados de um estudo de campo que contribuiu para o desenvolvimento dos testes TOEIC Bridge redesenhados. As análises estatísticas fornecem evidências iniciais que sustentam afirmações de que as pontuações redesenhadas dos testes TOEIC Bridge são consistentes e que as pontuações são indicadores significativos da proficiência em inglês nos níveis básico a intermediário.

Leia mais

Este artigo descreve dois estudos que examinaram a relação entre as pontuações redesenhadas dos testes TOEIC Bridge e as autoavaliações de proficiência linguística. Os resultados fornecem evidências para apoiar afirmações de que as pontuações dos testes são indicadores significativos de proficiência linguística, e que as pontuações podem ser usadas para diferenciar significativamente os níveis de proficiência linguística conforme definidos por padrões de proficiência linguística, como o Quadro Europeu Comum de Referência para Línguas (CECR).

Leia mais

Este estudo investigou se as pontuações dos testes TOEIC^® Speaking eram bons preditores da eficácia comunicativa dos candidatos, conforme avaliada por profissionais no ambiente de trabalho internacional. Profissionais de 10 países participaram de uma pesquisa na qual avaliaram a eficácia comunicativa dos candidatos em diferentes cenários comunicativos. Os resultados fornecem evidências de que as pontuações dos testes TOEIC Speaking são uma avaliação significativa da proficiência que se compara a como os profissionais percebem a eficácia comunicativa.

Leia mais

Este estudo investigou se as pontuações dos testes de escrita do TOEIC eram bons preditores da "adequação funcional" (ou eficácia comunicativa) das habilidades de escrita dos candidatos, conforme avaliadas por profissionais no ambiente de trabalho internacional. Profissionais de 10 países participaram de uma pesquisa na qual avaliaram a adequação funcional da escrita dos candidatos em diferentes cenários comunicativos. Os resultados fornecem evidências de que as pontuações dos testes de escrita do TOEIC são uma avaliação significativa da proficiência que se compara a como os profissionais percebem a adequação funcional da escrita.

Leia mais

Este artigo resume o "argumento de validade" para os testes TOEIC Bridge redesenhados. O argumento da validade consiste em quatro afirmações principais sobre consistência de pontuação, validade e justiça, uso adequado do teste e impactos positivos; juntos, isso fornece uma narrativa coerente sobre a qualidade da medição e os usos pretendidos das pontuações dos testes. Ao considerar as alegações e as evidências de apoio apresentadas no argumento de validade, os leitores devem ser capazes de avaliar melhor se os testes TOEIC Bridge redesenhados são apropriados para sua situação.

Leia mais

Este artigo oferece uma visão geral não técnica do desenvolvimento de testes e projetos de pesquisa realizados para garantir que as pontuações dos testes TOEIC sirvam como indicadores válidos das habilidades dos candidatos para se comunicarem em inglês em ambientes de trabalho globais.

O principal valor dos testes TOEIC está em sua validade, que pode ser definida como a extensão em que os testes fazem o que afirmamos que podem fazer.

Leia mais

Por meio do exame das pontuações dos testes, esta pesquisa constatou que os testes TOEIC medem habilidades distintas, mas relacionadas, e que, em conjunto, fornecem um quadro razoavelmente completo da proficiência em inglês. Essa constatação fornece evidências adicionais de que a abordagem de quatro habilidades para a avaliação da proficiência linguística é crucial.

Leia mais

As avaliações de proficiência em inglês são projetadas para uma população-alvo e podem incluir candidatos de diferentes origens demográficas, socioculturais e educacionais. Assume-se que o teste seja justo e as pontuações obtidas por diferentes subgrupos de candidatos têm o mesmo significado. Uma forma de avaliar a equidade do teste é produzir um teste vinculado para cada subgrupo e comparar os resultados das pontuações do teste vinculado com as pontuações do teste original que fizeram.

Leia mais

Para entender melhor o significado das pontuações dos testes e facilitar a tomada de decisões, os usuários de pontuação podem precisar entender como as pontuações de dois testes diferentes estão relacionadas. A relação entre as pontuações de dois testes diferentes é tipicamente resumida em uma "tabela de concordância" que indica a correspondência entre as pontuações dos dois testes. Infelizmente, algumas tabelas de concordância são produzidas e distribuídas sem qualquer suporte de pesquisa, o que pode levar a decisões imprecisas e injustas sobre os candidatos.

Leia mais

Este estudo utilizou uma técnica estatística chamada "análise fator" para determinar qual modelo estatístico explicava melhor o desempenho no teste de Escuta e Leitura do TOEIC. Pesquisadores descobriram que um modelo (modelo de dois fatores) em que as habilidades de leitura e escuta eram representadas como habilidades distintas melhor explicava o desempenho, consistente com a forma como as pontuações devem ser interpretadas.

Leia mais

Em programas de teste, múltiplas formas de teste são usadas em diferentes administrações para evitar a superexposição dos formulários de teste e reduzir a possibilidade de os candidatos adquirirem conhecimento prévio do conteúdo do teste. Como pequenas diferenças podem ocorrer na dificuldade estatística dos formulários alternativos, um procedimento estatístico conhecido como vinculação de pontuação de teste tem sido comumente usado para ajustar essas diferenças de dificuldade, de modo que os formulários de teste sejam comparáveis.

Leia mais

Tradicionalmente, pesquisadores usavam o termo "autenticidade" para se referir ao grau em que as tarefas de um teste de idioma correspondem àquelas usadas no mundo real, sendo a autenticidade uma característica desejada de tarefas e testes. Este white paper explica como o formato de várias perguntas no teste TOEIC Speaking foi expandido para incluir uma maior variedade de situações do mundo real.

Leia mais

Este artigo explica como o teste de quatro habilidades de língua é a melhor forma de avaliar se alguém pode se comunicar em inglês, e explica como essa abordagem pode:

• resultar em uma forma mais justa de avaliação para os candidatos
• Melhorar a qualidade das decisões dos usuários de teste
• Criar um impacto mais positivo para tomadores de decisão, professores e alunos

Leia mais

O teste de Escuta TOEIC inclui itens ou tarefas relacionadas ao ambiente de trabalho global e com uma variedade de contextos autênticos. À medida que a necessidade de um número cada vez maior de formulários de teste aumentou, um objetivo importante para o teste de Escuta TOEIC tem sido aumentar a eficiência das gerações de itens mantendo um grande conjunto de itens em uma ampla gama de contextos, que tem sido um objetivo importante para o teste de Escuta TOEIC.

Leia mais

Este estudo investigou se a proficiência em uma determinada habilidade linguística (por exemplo, fala) poderia ser melhor estimada considerando não apenas as pontuações dos testes TOEIC correspondentes a essa habilidade, mas também as pontuações dos testes TOEIC para outras habilidades. Os resultados apoiaram essa afirmação, sugerindo que as pontuações nos testes TOEIC de quatro habilidades juntas fornecem uma medida mais válida da proficiência em inglês do que qualquer habilidade isoladamente.

Leia mais

Este estudo investiga:

• A medida em que as pontuações do TOEIC em uma habilidade se correlacionam com as autoavaliações dos candidatos sobre suas habilidades em inglês em todas as quatro habilidades
• Se uma habilidade de inglês (por exemplo, leitura) pode ser estimada ou prevista com mais precisão usando múltiplas outras pontuações do TOEIC, ou seja, escuta, fala e escrita

Leia mais

O funcionamento diferencial de itens (DIF) é um procedimento estatístico usado para identificar itens ou tarefas que são inesperadamente tendenciosos de alguma forma, favorecendo inadequadamente um grupo de candidatos em detrimento de outro. Um dos desafios para testes de fala e escrita é a falta de técnicas DIF comprovadas e práticas que possam ser usadas para analisar testes baseados em desempenho ou "resposta construída". Este artigo investiga várias dessas técnicas e ilustra como pesquisas estão sendo conduzidas para garantir a justiça das interpretações das pontuações.

Leia mais

Este artigo compara o conteúdo, a confiabilidade e a dificuldade dos clássicos e dos testes de Compreensão e Leitura do TOEIC redesenhados em 2006. Embora os testes redesenhados incluíssem tipos de itens ligeiramente diferentes para refletir melhor os modelos atuais de proficiência linguística, os testes foram considerados semelhantes entre as versões.

Leia mais

O Design Centrado em Evidências (ECD) é uma metodologia de desenvolvimento de avaliação que esclarece explicitamente o que uma avaliação mede e apoia interpretações de habilidades com base nas pontuações dos testes. Este artigo descreve os processos de ECD usados para desenvolver os testes de Fala e Escrita do TOEIC. As evidências coletadas por meio do processo de desenho do teste produziram suporte fundamental para a validade das interpretações das pontuações dos testes de fala e escrita do TOEIC.

Leia mais

Este artigo relata os resultados de um estudo piloto que contribuiu para o desenvolvimento do teste de fala e escrita do TOEIC. A análise da confiabilidade das pontuações dos testes encontrou evidências de vários tipos de consistência de pontuação, incluindo confiabilidade entre avaliadores (concordância de vários avaliadores sobre uma pontuação) e consistência interna (uma medida baseada na correlação entre itens do mesmo teste).

Leia mais

Para garantir que os testes continuem atendendo às necessidades dos participantes e usuários de pontuação, é importante que os programas de avaliação revisem periodicamente suas avaliações. Por essa razão, para acompanhar o uso continuamente em mudança do inglês e as formas como as pessoas comumente se comunicam no ambiente de trabalho global e no dia a dia, um teste atualizado de Escuta e Leitura do TOEIC foi projetado e lançado pela primeira vez em maio de 2016.

Leia mais

Após qualquer projeto de redesenho do teste — como o redesenho do teste de Escuta e Leitura do TOEIC em 2006 — é importante apresentar evidências de que as pontuações dos testes ainda podem ser interpretadas de forma significativa. Este estudo examinou a relação entre as pontuações no redesenho do teste de Compreensão e Leitura do TOEIC e as percepções dos candidatos sobre sua própria proficiência em inglês. Pesquisadores encontraram correlações moderadas entre as pontuações dos testes e as percepções dos candidatos, fornecendo evidências de que as pontuações nos testes redesenhados de Escuta e Leitura do TOEIC são indicadores significativos da habilidade em inglês.

Leia mais

Este estudo buscou comparar as pontuações do TOEIC Bridge com as autoavaliações dos candidatos sobre suas próprias habilidades de realizar tarefas cotidianas do idioma em inglês. Os resultados sugerem que as pontuações dos testes se correlacionaram bem com as autoavaliações dos candidatos, fornecendo evidências adicionais em apoio às pontuações do TOEIC Bridge como indicadores válidos e justos de proficiência em inglês.

Leia mais

Este estudo examina a relação entre as pontuações de Compreensão Oral e Leitura do TOEIC e as de Oral and Writing do TOEIC para determinar se as pontuações de Compreensão Oral e Leitura devem ser usadas como preditoras das pontuações de Oral e Escrita e vice-versa. Os resultados apoiam a validade das pontuações dos testes para as habilidades medidas (por exemplo, as pontuações dos testes de Compreensão Oral e Leitura fornecem interpretações significativas das habilidades de Escuta e Leitura).

Leia mais

Este estudo buscou comparar as pontuações dos testes de Fala e Escrita do TOEIC com as autoavaliações dos alunos sobre suas habilidades de realizar tarefas diárias em inglês. Os pesquisadores relataram correlações relativamente fortes entre as pontuações dos testes e as autoavaliações. Essa descoberta contribui com evidências adicionais em apoio às pontuações dos testes de fala e escrita do TOEIC como indicadores de proficiência em inglês. Este estudo também foi publicado como Powers, Kim, Weng, e Van Winkle (2009).

Leia mais

Ancoragem de escala é um processo que agrupa as pontuações dos testes em faixas de pontuação ou níveis de proficiência. Ele utiliza uma combinação de métodos estatísticos e julgamento especializado para produzir descrições das habilidades e conhecimentos tipicamente exibidos pelos candidatos em cada nível de proficiência. Este relatório de pesquisa descreve o processo de ancoragem de escalas para os testes de Escuta e Leitura do TOEIC, o que facilita interpretações significativas das pontuações.

Leia mais

Este relatório descreve os objetivos e resultados de um projeto para atualizar o teste de Compreensão e Leitura do TOEIC em 2016. O uso do inglês para comunicação, especialmente em contextos de trabalho internacionais, está em constante evolução. Portanto, o teste de Compreensão e Leitura do TOEIC é revisado periodicamente para garantir que o conteúdo do teste reflita a comunicação atual no ambiente de trabalho e no dia a dia, apoiando interpretações significativas sobre habilidades em inglês e promovendo um impacto positivo no ensino e aprendizagem do inglês.

Leia mais

Com o passar do tempo, torna-se importante revisar o design de um teste para garantir que sua conceitualização da proficiência linguística esteja alinhada com a teoria atual, e as tarefas do teste continuam sendo indicativas de tarefas do mundo real. Este relatório descreve os objetivos, alinhamento teórico, procedimentos e resultados de um esforço de redesenho para o teste de Compreensão e Leitura do TOEIC.  

Leia mais

Este artigo descreve os resultados de um estudo de campo para os testes de Escuta e Leitura do TOEIC redesenhados em 2006, que inclui análises de dificuldade de itens e testes, confiabilidade e correlações entre as seções do teste e os clássicos testes de Escuta e Leitura do TOEIC. Os resultados são consistentes com outro estudo de comparabilidade (Liao, Hatrak e Yu em 2010), que encontrou evidências da confiabilidade dos testes redesenhados e sugeriu que as pontuações do teste redesenhado poderiam ser interpretadas e usadas de maneira semelhante às pontuações clássicas do TOEIC em Escuta e Leitura.

Leia mais

Este estudo comparou as pontuações do TOEIC Bridge com as avaliações dos professores sobre a capacidade dos candidatos de realizar tarefas do dia a dia em inglês. Os autores relataram correlações moderadas entre essas avaliações e as pontuações dos testes, que fornecem evidências de apoio da validade das pontuações do TOEIC Bridge como indicadores de proficiência em inglês.

Leia mais

Este estudo buscou avaliar o grau em que as pontuações do TOEIC Bridge correspondem às autoavaliações dos alunos e às avaliações dos professores, duas medidas de proficiência em inglês. As pontuações do TOEIC Bridge mostraram-se moderadamente correlacionadas com essas medições, um achado que fornece evidências de validade de que as pontuações do TOEIC Bridge podem ser interpretadas de forma significativa como indicadores de proficiência em inglês.

Leia mais

Este estudo investigou a relação entre as pontuações do TOEIC Bridge e as avaliações dos alunos sobre sua própria proficiência em inglês. As pontuações do TOEIC Bridge mostraram correlação com habilidades de leitura e escuta auto-relatadas, fornecendo evidências de que as pontuações do TOEIC Bridge são indicadores válidos ou significativos de proficiência em leitura e escuta em inglês.

Leia mais