Cet article présente les résultats d’une étude de terrain qui a contribué au développement des tests TOEIC Bridge révisés. Les analyses statistiques fournissent des preuves initiales étayant l’idée que les scores des tests TOEIC Bridge révisés sont cohérents et qu’ils constituent des indicateurs pertinents du niveau de compétence en anglais, du niveau débutant au niveau intermédiaire.

Lire la suite

Cet article résume « l’argumentaire de validité » des tests TOEIC Bridge révisés. L’argumentaire de validité repose sur quatre affirmations principales concernant la cohérence des scores, la validité et l’équité, l’utilisation appropriée du test et les impacts positifs ; ensemble, elles fournissent une présentation cohérente de la qualité de mesure et des usages prévus des scores. En examinant les affirmations et les preuves présentées dans l’argumentaire de validité, les lecteurs devraient être en mesure d’évaluer plus précisément si les tests TOEIC Bridge révisés conviennent à leur situation.

En savoir plus

Dans les programmes d’évaluation à grande échelle et à enjeux élevés, comme le programme TOEIC, certains candidats passent le test plusieurs fois au fil du temps. Les schémas de variation des scores de ces « répétiteurs » peuvent être analysés pour soutenir la qualité globale du test (par exemple, sa fiabilité, sa validité et ses usages prévus). Cette étude a examiné les schémas de variation de scores mentionnés ci‑dessus, dans le but d’évaluer la fiabilité et la validité des scores du test TOEIC® Listening and Reading.

Lire la suite

Les évaluations de compétence en anglais sont conçues pour une population cible et peuvent inclure des candidats issus de milieux démographiques, socioculturels et éducatifs variés. Le test est supposé être équitable et les scores obtenus par différents sous‑groupes de candidats doivent avoir la même signification. Une manière d’évaluer l’équité du test consiste à produire une version liée du test pour chaque sous‑groupe et à comparer les résultats de cette version avec les scores du test original qu’ils ont passé.

Lire la suite

En général, des évaluateurs humains sont utilisés pour noter les tests d’expression orale et écrite en raison de leur capacité à évaluer une gamme plus large de performances linguistiques que les systèmes automatisés. Cet article décrit comment ETS garantit la fiabilité et la cohérence des scores attribués par les évaluateurs humains pour les tests TOEIC Speaking et Writing grâce à la formation, la certification et des procédures de suivi administratif et statistique systématiques.

Lire la suite

Dans les programmes d’évaluation, plusieurs versions d’un test sont utilisées lors de différentes sessions afin d’éviter la surexposition des versions et de réduire la possibilité que les candidats aient une connaissance préalable du contenu. Comme de légères différences peuvent exister dans la difficulté statistique des versions alternatives, une procédure statistique appelée test score linking est couramment utilisée pour ajuster ces différences afin de rendre les versions comparables.

Lire la suite

Le processus de notation du test TOEIC Listening and Reading inclut des procédures de suivi qui contribuent à garantir que les scores sont cohérents entre les différentes versions et sessions, et que l’interprétation des compétences est équitable. Cette étude explore la possibilité d’utiliser des informations sur le profil des candidats afin d’améliorer plusieurs types de procédures de suivi. Les résultats des analyses suggèrent que certaines variables de profil peuvent faciliter le suivi des performances du test entre les sessions, renforçant ainsi les procédures de contrôle qualité du test TOEIC Listening and Reading ainsi que les preuves de cohérence des scores.

Lire la suite

Pour les tests éducatifs, il est essentiel de maintenir la cohérence des échelles de scores et de comprendre les sources de variation des moyennes de scores dans le temps. Cela permet de garantir que les interprétations des compétences des candidats sont comparables d’une session (ou version) à l’autre. À l’aide de procédures statistiques, cette étude a examiné la cohérence des scores rapportés pour les tests TOEIC Speaking and Writing.

Lire la suite

Cet article compare le contenu, la fiabilité et la difficulté des tests TOEIC Listening and Reading classiques et révisés en 2006. Bien que les tests révisés incluent des types d’items légèrement différents pour mieux refléter les modèles actuels de compétence linguistique, les tests ont été jugés similaires entre les versions.

Lire la suite

Les programmes d’évaluation devraient périodiquement revoir leurs tests afin de s’assurer que les items ou tâches sont bien alignés avec les activités réelles. Pour cette raison, afin de mieux soutenir l’apprentissage communicatif de la langue et de décourager la mémorisation et d’autres stratégies de passage de test, ETS a élargi le format de certains items du test TOEIC Speaking en mai 2015.

Lire la suite

Pour garantir que les tests continuent de répondre aux besoins des candidats et des utilisateurs des scores, il est important que les programmes d’évaluation réexaminent périodiquement leurs tests. Pour cette raison, afin de suivre l’évolution constante des usages de l’anglais et des modes de communication dans le monde professionnel et la vie quotidienne, une version mise à jour du test TOEIC Listening and Reading a été conçue et lancée en mai 2016.

Lire la suite

Cette étude examine la cohérence des scores TOEIC Speaking. L’analyse utilise une méthodologie fondée sur la théorie de la généralisabilité, qui permet aux chercheurs d’examiner dans quelle mesure certains aspects de la procédure de test (évaluateurs, tâches) influencent les scores. Les résultats apportent des preuves étayant l’idée que les scores TOEIC Speaking sont cohérents.

Lire la suite

Cet article décrit les procédures mises en place pour surveiller la performance individuelle des évaluateurs des tests TOEIC Speaking and Writing et améliorer la qualité globale de la notation. Ces procédures multiples et soigneusement élaborées contribuent à réduire au minimum le risque d’erreur humaine, renforçant ainsi la cohérence et la fiabilité des scores des tests TOEIC.

Lire la suite

La fiabilité ou la cohérence des scores peut être examinée de différentes manières, notamment en évaluant dans quelle mesure les scores d’un même candidat sont cohérents entre différentes versions du test (« fiabilité des formes équivalentes ») et entre différentes sessions (« fiabilité test-retest »). Cette étude a examiné la cohérence des scores TOEIC Speaking and Writing entre différentes versions du test à différents intervalles de temps (par exemple, 1–30 jours, 31–60 jours) et a constaté que les scores présentaient une fiabilité test-retest élevée pour les formes équivalentes.

Lire la suite

Cet article présente les résultats d’une étude pilote ayant contribué au développement des tests TOEIC Speaking and Writing. L’analyse de la fiabilité des scores a mis en évidence plusieurs types de cohérence des scores, notamment la cohérence inter‑évaluateurs (accord entre plusieurs évaluateurs sur un score) et la cohérence interne (mesure fondée sur la corrélation entre les items d’un même test).

Lire la suite

Cet article décrit les résultats d’une étude de terrain menée pour les tests TOEIC Listening and Reading révisés en 2006, incluant des analyses de la difficulté des items et du test, de la fiabilité et des corrélations entre les sections du test révisé et celles du test TOEIC classique. Les résultats sont cohérents avec une autre étude de comparabilité (Liao, Hatrak et Yu, 2010), qui a mis en évidence la fiabilité des tests révisés et suggéré que les scores du test révisé pouvaient être interprétés et utilisés de manière similaire aux scores du test TOEIC Listening and Reading classique.

Lire la suite