Passer au contenu principal
Skip to footer

 

Le recherche TOEIC

Faire progresser l’évaluation, l’enseignement et l’apprentissage de la langue anglaise

Validité et équité des interprétations des scores TOEIC

La conception et le développement des tests TOEIC reposent sur des processus systématiques et rigoureux, permettant aux utilisateurs des scores d’avoir la certitude que leurs interprétations sont pertinentes, équitables et en lien avec les compétences réelles. Les recherches menées visent à examiner :

  1. si les scores signifient ce qu’ils sont censés signifier ;
  2. si les interprétations des scores TOEIC concernant les compétences en anglais sont impartiales, équitables et reflètent les capacités réelles.

Justification de la définition du construit pour une nouvelle évaluation de compétence linguistique : les tests TOEIC Bridge® révisés — Document cadre

Cet article décrit les motivations à l’origine de la conception des évaluations TOEIC Bridge révisées pour mesurer les quatre compétences de communication, les objectifs de ces évaluations et la manière dont nous avons défini la compétence en compréhension orale, compréhension écrite, expression orale et expression écrite en anglais dans des contextes quotidiens pour des apprenants de niveau débutant à intermédiaire. Ces informations constituent une base pour le développement du test et les recherches ultérieures sur sa validité.

En savoir plus

Lisez Justifier la définition du construct pour une nouvelle évaluation de la maîtrise linguistique : les tests repensés du TOEIC Bridge — Mémoire-cadre

Développement des tests TOEIC Bridge® révisés


Les tests TOEIC Bridge révisés ont été développés à l’aide d’une méthodologie de conception d’évaluation appelée conception centrée sur les preuves (evidence-centered design, ECD). Cet article documente la manière dont l’ECD a été utilisé pour concevoir des tâches permettant de recueillir des preuves de la compétence en anglais de niveau débutant à intermédiaire des candidats, et comment diverses sources de données obtenues tout au long du processus de développement ont influencé les décisions relatives à la conception des items et du test.
En savoir plus

Lire le développement des essais de pont TOEIC repensés

Analyses statistiques de l’étude de terrain pour les tests TOEIC Bridge® révisés

Cet article présente les résultats d’une étude de terrain qui a contribué au développement des tests TOEIC Bridge révisés. Les analyses statistiques fournissent des preuves initiales étayant l’idée que les scores des tests TOEIC Bridge révisés sont cohérents et qu’ils constituent des indicateurs pertinents du niveau de compétence en anglais, du niveau débutant au niveau intermédiaire.

Lire la suite

Lire l’analyse statistique de terrain pour les tests ponts TOEIC repensés

Les tests TOEIC Bridge® révisés : relations avec les perceptions des candidats sur leur compétence en anglais

Cet article décrit deux études ayant examiné la relation entre les scores des tests TOEIC Bridge révisés et les auto‑évaluations de compétence linguistique. Les résultats apportent des preuves soutenant l’idée que les scores sont des indicateurs pertinents de la compétence linguistique, et qu’ils permettent de différencier de manière significative les niveaux de compétence tels que définis par des standards comme le Cadre européen commun de référence pour les langues (CECRL).

Lire la suite

Lisez les tests repensés du TOEIC Bridge : Relations avec la perception de la maîtrise de l’anglais par les candidats

Prédire l’efficacité communicative dans le milieu professionnel international : appui aux scores du test TOEIC® Speaking par des non spécialistes en linguistique

Cette étude a examiné si les scores du test TOEIC Speaking étaient de bons prédicteurs de l’efficacité communicative des candidats, telle qu’évaluée par des professionnels du milieu professionnel international. Des professionnels de 10 pays ont participé à une enquête dans laquelle ils ont évalué l’efficacité communicative de candidats dans différents scénarios. Les résultats montrent que les scores TOEIC Speaking constituent une évaluation pertinente de la compétence, comparable à la manière dont les professionnels perçoivent l’efficacité communicative.

Lire la suite

Lire Prédire l’efficacité de la communication dans le milieu de travail international : soutien aux résultats des tests de parole TOEIC par des profanes linguistiques

Les scores du test TOEIC® Writing comme indicateurs de l’adéquation fonctionnelle de l’expression écrite dans le milieu professionnel international : évaluation par des non spécialistes en linguistique

Cette étude a examiné si les scores du test TOEIC Writing étaient de bons prédicteurs de « l’adéquation fonctionnelle » (ou efficacité communicative) des compétences d’expression écrite des candidats, telle qu’évaluée par des professionnels du milieu professionnel international. Des professionnels de 10 pays ont participé à une enquête dans laquelle ils ont évalué l’adéquation fonctionnelle de l’expression écrite des candidats dans différents scénarios. Les résultats montrent que les scores TOEIC Writing constituent une évaluation pertinente de la compétence, comparable à la manière dont les professionnels perçoivent l’adéquation fonctionnelle de l’expression écrite.

Lire la suite

Lisez les résultats des tests d’écriture du TOEIC comme indicateurs de l’adéquation fonctionnelle de l’écriture dans le milieu de travail international : évaluation par des profanes linguistiques

Présentation des arguments en faveur de la qualité et de l’utilisation d’une nouvelle évaluation de compétence linguistique : argumentaire de validité pour les tests TOEIC Bridge® révisés

Cet article résume « l’argumentaire de validité » des tests TOEIC Bridge révisés. L’argumentaire repose sur quatre affirmations principales concernant la cohérence des scores, la validité et l’équité, l’utilisation appropriée du test et les impacts positifs ; ensemble, elles fournissent une présentation cohérente de la qualité de mesure et des usages prévus des scores. En examinant les affirmations et les preuves présentées, les lecteurs devraient être en mesure d’évaluer plus précisément si les tests TOEIC Bridge révisés conviennent à leur situation.

En savoir plus

Read Défendant la qualité et l’utilisation d’un nouvel argument de validité de l’évaluation de la maîtrise linguistique pour les tests ponts TOEIC repensés

Validité : que signifie-t-elle pour les tests TOEIC® ?

Cet article propose une présentation non technique du développement des tests et des projets de recherche menés pour garantir que les scores TOEIC constituent des indicateurs valides des compétences des candidats à communiquer en anglais dans des environnements professionnels internationaux. La valeur principale des tests TOEIC réside dans leur validité, définie comme la mesure dans laquelle les tests accomplissent ce que nous affirmons qu’ils permettent de faire.

En savoir plus

Lisez-en plus sur la validité : que signifie-t-elle pour les tests TOEIC ?

La relation entre les compétences TOEIC® Listening, Reading, Speaking et Writing

L’examen des scores de test a montré que les tests TOEIC mesurent des compétences distinctes mais liées, et que, pris ensemble, ils offrent une image raisonnablement complète de la compétence en anglais. Cette conclusion apporte des preuves supplémentaires indiquant qu’une approche d’évaluation fondée sur les quatre compétences est essentielle.

En savoir plus

en savoir plus sur la relation entre les compétences d’écoute, de lecture, d’expression orale et d’écriture du TOEIC

Mesurer la compétence en anglais au sein de sous groupes : utiliser l’évaluation de l’équité des scores pour examiner l’équité du test

Les évaluations de compétence en anglais sont conçues pour une population cible et peuvent inclure des candidats issus de milieux démographiques, socioculturels et éducatifs variés. Le test est supposé être équitable et les scores obtenus par différents sous‑groupes doivent avoir la même signification. Une manière d’évaluer l’équité du test consiste à produire une version liée du test pour chaque sous‑groupe et à comparer les résultats de cette version avec les scores du test original qu’ils ont passé.

Lire la suite

En savoir plus sur la mesure de la maîtrise de l’anglais dans les sous-groupes : Utiliser l’évaluation de l’équité des scores pour évaluer l’équité des tests

Bonnes pratiques pour comparer les scores du test TOEIC® Speaking à d’autres évaluations et standards : guide pour les utilisateurs de scores

Pour mieux comprendre la signification des scores et faciliter la prise de décision, les utilisateurs peuvent avoir besoin de comprendre comment les scores de deux tests différents sont liés. Cette relation est généralement résumée dans un « tableau de concordance » indiquant la correspondance entre les scores des deux tests. Malheureusement, certains tableaux de concordance sont produits et diffusés sans fondement scientifique, ce qui peut conduire à des décisions inexactes et injustes concernant les candidats.

Lire la suite

Lisez-en plus sur les meilleures pratiques pour comparer les scores des tests de parole du TOEIC avec d’autres évaluations et normes : Guide de l’utilisateur des scores

Mesurer la compétence en anglais professionnel au sein de sous groupes : utiliser des modèles d’analyse factorielle pour valider l’interprétation des scores

Cette étude a utilisé une technique statistique appelée « analyse factorielle » pour déterminer quel modèle statistique expliquait le mieux la performance au test TOEIC Listening and Reading. Les chercheurs ont constaté qu’un modèle à deux facteurs, dans lequel les compétences de lecture et d’écoute sont représentées comme des aptitudes distinctes, expliquait le mieux la performance, conformément à la manière dont les scores doivent être interprétés.

Lire la suite

en savoir plus sur la mesure de la compétence en anglais au travail entre sous-groupes : Utilisation des modèles CFA pour valider l’interprétation des résultats des tests

Liaison des scores TOEIC® Speaking à partir des scores TOEIC® Listening

Dans les programmes d’évaluation, plusieurs versions d’un test sont utilisées lors de différentes sessions afin d’éviter la surexposition des versions et de réduire la possibilité que les candidats aient une connaissance préalable du contenu. Comme de légères différences peuvent exister dans la difficulté statistique des versions alternatives, une procédure statistique appelée test score linking est couramment utilisée pour ajuster ces différences afin de rendre les versions comparables.

Lire la suite

en savoir plus sur le lien entre les scores d’expression orale du TOEIC et les scores d’écoute du TOEIC

Extension des formats de questions du test TOEIC® Speaking

Traditionnellement, les chercheurs utilisent le terme « authenticité » pour désigner le degré auquel les tâches d’un test de langue correspondent à celles utilisées dans le monde réel, l’authenticité étant une caractéristique souhaitée des tâches et des tests. Ce document explique comment le format de plusieurs questions du test TOEIC Speaking a été élargi pour inclure une plus grande variété de situations réelles.

Lire la suite

en savoir plus sur l’élargissement des formats de questions du test TOEIC Speaking Test

Argumentaire en faveur d’une évaluation complète des quatre compétences en anglais

Cet article explique en quoi l’évaluation linguistique portant sur les quatre compétences est la meilleure manière de déterminer si une personne peut communiquer en anglais, et montre comment cette approche peut :

  • aboutir à une méthode d’évaluation plus équitable pour les candidats ;
  • améliorer la qualité des décisions prises par les utilisateurs des tests ;
  • créer un impact plus positif pour les décideurs, les enseignants et les apprenants.

Lire la suite

en savoir plus sur L’Affaire en faveur d’une évaluation complète en quatre compétences de la maîtrise de la langue anglaise

Analyse de la génération d’items à l’aide d’outils de traitement automatique du langage naturel pour le test TOEIC® Listening

Le test TOEIC Listening comprend des items ou tâches liés au monde professionnel international et à une variété de contextes authentiques. À mesure que le besoin d’un nombre toujours plus important de versions de test a augmenté, un objectif essentiel du test TOEIC Listening a été d’accroître l’efficacité de la génération d’items en maintenant un vaste ensemble d’items couvrant un large éventail de contextes.

En savoir plus

en savoir plus sur l’analyse de la génération d’items avec des outils de traitement du langage naturel pour le test d’écoute TOEIC

Contribution supplémentaire des tests TOEIC® Listening, Reading, Speaking et Writing à la prédiction de la performance dans des tâches réelles en anglais

Cette étude a examiné si la compétence dans une compétence linguistique particulière (par exemple, l’expression orale) pouvait être mieux estimée en prenant en compte non seulement les scores TOEIC correspondant à cette compétence, mais aussi les scores TOEIC des autres compétences. Les résultats soutiennent cette idée, suggérant que les scores des tests TOEIC fondés sur les quatre compétences fournissent ensemble une mesure plus valide de la compétence en anglais que toute compétence prise isolément.

En savoir plus

en savoir plus sur la contribution incrémentale des tests d’écoute, lecture, expression orale et écriture du TOEIC à la prédiction des performances sur des tâches réelles en anglais

Les tests TOEIC® Listening, Reading, Speaking et Writing : évaluation de leur contribution unique à la mesure de la compétence en anglais

Cette étude examine :

  • la mesure dans laquelle les scores TOEIC d’une compétence sont corrélés aux auto‑évaluations des candidats concernant leurs compétences en anglais dans les quatre domaines ;
  • si une compétence en anglais (par exemple, la lecture) peut être estimée ou prédite plus précisément en utilisant plusieurs autres scores TOEIC, c’est‑à‑dire l’écoute, l’expression orale et l’expression écrite.

En savoir plus

ead plus d’informations sur les tests d’écoute, lecture, expression orale et écriture du TOEIC : évaluer leur contribution unique à l’évaluation de la maîtrise de l’anglais

Évaluations du fonctionnement différentiel des items (DIF) pour les tests TOEIC® Speaking et Writing fondés sur des réponses construites

Le fonctionnement différentiel des items (DIF) est une procédure statistique utilisée pour identifier des items ou tâches présentant un biais inattendu, favorisant de manière inappropriée un groupe de candidats par rapport à un autre. L’un des défis pour les tests d’expression orale et écrite est le manque de techniques DIF éprouvées et pratiques pouvant être utilisées pour analyser des tests fondés sur des performances ou des « réponses construites ». Cet article examine plusieurs de ces techniques et illustre comment des recherches sont menées pour garantir l’équité des interprétations des scores.

En savoir plus

en savoir plus sur les évaluations du fonctionnement différentiel des items (DIF) par réponse construite (CR) pour les tests d’expression orale et écrite TOEIC

Comparaison du contenu, des statistiques d’items et de la performance des candidats au test TOEIC® Listening and Reading révisé et classique

Cet article compare le contenu, la fiabilité et la difficulté des tests TOEIC Listening and Reading classiques et révisés en 2006. Bien que les tests révisés incluent des types d’items légèrement différents pour mieux refléter les modèles actuels de compétence linguistique, les tests ont été jugés similaires entre les versions.

Lire la suite

Lisez-en plus sur la comparaison du contenu, des statistiques des items et des performances des candidats lors du test d’écoute et de lecture TOEIC repensé et classique

Conception fondée sur les preuves : les tests TOEIC® Speaking et Writing

L’Evidence-Centered Design (ECD) est une méthodologie de développement d’évaluation qui clarifie explicitement ce qu’un test mesure et soutient l’interprétation des compétences à partir des scores. Cet article décrit les processus ECD utilisés pour développer les tests TOEIC Speaking and Writing. Les preuves recueillies au cours du processus de conception ont fourni un appui fondamental à la validité des interprétations des scores TOEIC Speaking and Writing.

Lire la suite

en savoir plus sur la conception centrée sur les preuves : les tests d’expression orale et d’écriture du TOEIC

Analyses statistiques pour l’étude pilote des tests TOEIC® Speaking and Writing

Cet article présente les résultats d’une étude pilote ayant contribué au développement des tests TOEIC Speaking and Writing. L’analyse de la fiabilité des scores a mis en évidence plusieurs types de cohérence des scores, notamment la cohérence inter‑évaluateurs (accord entre plusieurs évaluateurs sur un score) et la cohérence interne (mesure fondée sur la corrélation entre les items d’un même test).

Lire la suite

en savoir plus sur les analyses statistiques pour l’étude pilote de conférence et d’écriture du TOEIC

Analyses statistiques pour le test TOEIC® Listening and Reading mis à jour

Pour garantir que les tests continuent de répondre aux besoins des candidats et des utilisateurs des scores, il est important que les programmes d’évaluation réexaminent périodiquement leurs tests. Pour cette raison, afin de suivre l’évolution constante des usages de l’anglais et des modes de communication dans le monde professionnel et la vie quotidienne, une version mise à jour du test TOEIC Listening and Reading a été conçue et lancée en mai 2016.

Lire la suite

en savoir plus sur les analyses statistiques du test TOEIC lancées en mai 2016

Le test TOEIC® Listening and Reading révisé : relations avec les perceptions des candidats sur leur compétence en anglais

Après tout projet de révision d’un test — comme la révision du test TOEIC Listening and Reading en 2006 — il est important de fournir des preuves que les scores peuvent toujours être interprétés de manière pertinente. Cette étude a examiné la relation entre les scores du test révisé TOEIC Listening and Reading et les perceptions des candidats concernant leur propre compétence en anglais. Les chercheurs ont trouvé des corrélations modérées entre les scores et les perceptions des candidats, apportant des preuves que les scores du test révisé TOEIC Listening and Reading sont des indicateurs pertinents de la compétence en anglais.

Lire la suite

en savoir plus sur le test repensé de l’écoute et de la lecture TOEIC : Relations avec la perception des candidats à la maîtrise de l’anglais

Scores TOEIC Bridge™ : preuves de validité en Corée et au Japon

Cette étude visait à comparer les scores TOEIC Bridge aux auto‑évaluations des candidats concernant leur capacité à accomplir des tâches linguistiques quotidiennes en anglais. Les résultats suggèrent que les scores du test corrèlent bien avec les auto‑évaluations des candidats, apportant des preuves supplémentaires soutenant l’idée que les scores TOEIC Bridge sont des indicateurs valides et équitables de la compétence en anglais.

Lire la suite

en savoir plus sur les scores TOEIC Bridge : Preuves de validité de la Corée et du Japon

Relations entre les scores mesurés par le test TOEIC® Listening and Reading et les tests TOEIC® Speaking and Writing

Cette étude examine la relation entre les scores TOEIC Listening and Reading et les scores TOEIC Speaking and Writing afin de déterminer si les scores d’écoute et de lecture doivent être utilisés comme prédicteurs des scores d’expression orale et écrite, et inversement. Les résultats soutiennent la validité des scores pour les compétences mesurées (par exemple, les scores des tests Listening and Reading fournissent des interprétations pertinentes des compétences de compréhension orale et écrite).

Lire la suite

en savoir plus sur les relations entre les scores aux tests mesurés par le test d’écoute et de lecture TOEIC et les tests d’expression orale et écrite TOEIC

Les tests TOEIC® Speaking and Writing : relations avec les perceptions des candidats sur leur compétence en anglais

Cette étude visait à comparer les scores des tests TOEIC Speaking and Writing aux auto‑évaluations des étudiants concernant leur capacité à accomplir des tâches quotidiennes en anglais. Les chercheurs ont rapporté des corrélations relativement fortes entre les scores de test et les auto‑évaluations. Ce résultat apporte des preuves supplémentaires soutenant l’idée que les scores des tests TOEIC Speaking and Writing sont des indicateurs de la compétence en anglais. Cette étude a également été publiée sous la référence Powers, Kim, Weng et Van Winkle (2009).

Lire la suite

en savoir plus sur les tests d’expression orale et écrite du TOEIC : Relations avec la perception des candidats à la maîtrise de l’anglais

Étude d’ancrage des échelles du test TOEIC® Listening and Reading

L’ancrage d’échelle est un processus qui regroupe les scores de test en plages de scores ou en niveaux de compétence. Il utilise une combinaison de méthodes statistiques et de jugement d’experts pour produire des descriptions des compétences et connaissances généralement observées chez les candidats à chaque niveau de compétence. Ce rapport de recherche décrit le processus d’ancrage d’échelle pour les tests TOEIC Listening and Reading, qui facilite des interprétations pertinentes des scores.

Lire la suite

en savoir plus sur l’étude d’ancrage de l’échelle du test d’écoute et de lecture du TOEIC

Contexte et objectifs du projet de mise à jour du test TOEIC® Listening and Reading

Ce rapport décrit les objectifs et les résultats d’un projet visant à mettre à jour le test TOEIC Listening and Reading en 2016. L’usage de l’anglais pour la communication, en particulier dans les contextes professionnels internationaux, évolue constamment. Par conséquent, le test TOEIC Listening and Reading est réexaminé périodiquement afin de garantir que son contenu reflète la communication actuelle dans le milieu professionnel et dans la vie quotidienne, soutenant ainsi des interprétations pertinentes des compétences en anglais et favorisant un impact positif sur l’enseignement et l’apprentissage de l’anglais.

Lire la suite

en savoir plus sur les contextes et les objectifs du projet de mise à jour du test d’écoute et de lecture du TOEIC

Contexte et objectifs du projet de révision du test TOEIC® Listening and Reading

Avec le temps, il devient important de revoir la conception d’un test afin de s’assurer que sa conceptualisation de la compétence linguistique est alignée sur les théories actuelles et que les tâches du test continuent de refléter des tâches du monde réel. Ce rapport présente les objectifs, l’alignement théorique, les procédures et les résultats d’un projet de révision du test TOEIC Listening and Reading.

Lire la suite

Contexte et objectifs du projet de refonte du test d’écoute et de lecture du TOEIC®

Résultats de l’étude de terrain pour le test TOEIC® Listening and Reading révisé

Cet article décrit les résultats d’une étude de terrain menée pour les tests TOEIC Listening and Reading révisés en 2006, incluant des analyses de la difficulté des items et du test, de la fiabilité et des corrélations entre les sections du test révisé et celles du test TOEIC classique. Les résultats sont cohérents avec une autre étude de comparabilité (Liao, Hatrak et Yu, 2010), qui a mis en évidence la fiabilité des tests révisés et suggéré que les scores du test révisé pouvaient être interprétés et utilisés de manière similaire aux scores du test TOEIC Listening and Reading classique.

Lire la suite

Lisez-en plus sur les résultats des études de terrain pour le test d’écoute et de lecture TOEIC repensé

Validation des scores TOEIC Bridge™ par rapport aux évaluations des enseignants pour des étudiants professionnels en Chine

Cette étude a comparé les scores TOEIC Bridge aux évaluations des enseignants concernant la capacité des candidats à accomplir des tâches linguistiques quotidiennes en anglais. Les auteurs ont rapporté des corrélations modérées entre ces évaluations et les scores de test, ce qui apporte des preuves supplémentaires de la validité des scores TOEIC Bridge en tant qu’indicateurs de la compétence en anglais.

Lire la suite

En savoir plus sur la validation des scores ponts TOEIC par rapport aux évaluations des enseignants pour les étudiants en formation professionnelle en Chine

Validation des scores TOEIC Bridge™ par rapport aux évaluations des enseignants et des étudiants : une étude de petite ampleur

Cette étude visait à évaluer dans quelle mesure les scores TOEIC Bridge correspondent aux auto‑évaluations des étudiants et aux évaluations des enseignants, deux mesures de la compétence en anglais. Les scores TOEIC Bridge se sont révélés modérément corrélés à ces mesures, un résultat qui fournit des preuves de validité indiquant que les scores TOEIC Bridge peuvent être interprétés de manière pertinente comme des indicateurs de la compétence en anglais.

Lire la suite

en savoir plus sur la validation des scores ponts TOEIC par rapport aux évaluations des enseignants et des élèves : une étude à petite échelle

Relation entre les scores du test TOEIC Bridge™ et les perceptions des étudiants sur leur compétence en anglais

Cette étude a examiné la relation entre les scores TOEIC Bridge et les évaluations des étudiants concernant leur propre compétence en anglais. Les scores du test TOEIC Bridge se sont révélés corrélés aux compétences d’écoute et de lecture auto‑rapportées, fournissant des preuves que les scores TOEIC Bridge sont des indicateurs valides ou pertinents de la compétence en compréhension orale et écrite en anglais.

Lire la suite

en savoir plus sur la reliation des scores au TOEIC Bridge Test à la perception de la maîtrise de l’anglais par les élèves

Investigating Fairness Claims for a General‐Purposes Assessment of English Proficiency for the International Workplace: Do Full‐Time Employees Have an Unfair Advantage Over Full‐Time Students?

This study examined whether full-time employees have an unfair advantage over full-time students on the TOEIC Listening and Reading test, given that the test includes workplace-oriented content. Using multiple forms of the test, the researchers applied statistical methods to detect items that may function differently across the two groups, reviewed flagged items with expert panels, and assessed whether any score differences could be attributed to unfair bias — finding no evidence that either group was systematically advantaged. The results support the fairness of TOEIC Listening and Reading scores for postsecondary test takers regardless of their level of workplace experience.

Read More

thumbnail-schmidgall-fairness

Validity Considerations for Testing Speaking in the Workplace: The TOEIC Speaking Test

This chapter examines how the construct of workplace speaking proficiency should be defined and what that definition means for the design of a test like the TOEIC Speaking test. Drawing on an interactionalist framework, it considers how factors such as the specific communicative demands of workplace contexts and the range of language a speaker draws on should inform task design, scoring criteria, and rater preparation — and how each of these elements contributes to the overall case for the validity of scores from a workplace speaking assessment.

Read More

thumbnail-schmidgall-validity