Pourquoi de nombreux candidats constatent-ils que leurs scores à l'évaluation des capacités cognitives de la TSA ne sont pas conformes à leurs attentes ?

Cette année marque la deuxième année consécutive où l'Université des sciences et technologies de Hanoï organise l'examen d'évaluation de la pensée TSA selon une nouvelle formule, ce qui signifie que la structure de l'examen a été modifiée par rapport à 2022 et aux années précédentes. En particulier, outre cette modification de la structure, l'Université des sciences et technologies de Hanoï a appliqué une nouvelle théorie d'évaluation, la théorie de la réponse aux questions (TRC), afin d'évaluer la qualité des questions et de calculer les scores des candidats.

Cela a pour conséquence que les candidats ne peuvent pas s'auto-évaluer après avoir passé le test et doivent attendre les résultats de l'analyse de leurs données. Par conséquent, après avoir reçu la notification des résultats, de nombreux candidats sont déconcertés car les notes obtenues ne correspondent pas à leurs attentes.

De nombreux étudiants sont très intéressés par le test d'évaluation de la pensée TSA organisé par l'Université des sciences et technologies de Hanoï.

Les résultats des tests constituent un modèle quantifié d'estimation des aptitudes du candidat.

Pour apaiser cette inquiétude chez les candidats, le journal Thanh Nien a interviewé le Dr Dang Xuan Cuong, scientifique indépendant possédant de nombreuses années d'expérience dans la recherche et la mise en œuvre de l'évaluation et de la mesure en éducation , et qui a été l'une des personnes ayant conseillé l'Université des sciences et technologies de Hanoï pour la mise en œuvre du test d'évaluation de la pensée TSA au cours des deux dernières années.

Selon le Dr Dang Xuan Cuong, la théorie de la réponse aux questions repose sur des modèles mathématiques expliquant la relation entre les aptitudes du candidat et les questions qui les évaluent. Grâce à cette approche théorique, les paramètres des questions (tels que la difficulté, la discrimination, la possibilité de deviner, etc.) et les aptitudes du candidat sont quantifiés à partir des données recueillies auprès d'un groupe de candidats ayant participé au test. Par conséquent, l'évaluation des aptitudes du candidat par la théorie de la réponse aux questions diffère de celle obtenue par la méthode de notation traditionnelle.

Les candidats sont testés avant de passer le test d'évaluation des capacités cognitives de la TSA.

Avec la notation traditionnelle, la note d'un test correspond simplement à l'addition mécanique des scores des questions, selon un barème précis. Les experts appellent cela la note brute. Grâce à cette note brute, la plupart des candidats peuvent s'auto-évaluer, et même si le test ne comporte que des questions à choix multiples, ils peuvent le faire après l'avoir passé.

Dans le cadre de la théorie de la réponse aux questions, le score au test est un résultat communiqué au candidat après l'analyse de ses données. Cette étape complexe requiert une expertise pointue ; elle est réalisée à l'aide d'un logiciel spécialisé et analysée avec soin au moyen d'indicateurs statistiques. En résumé, le score est un résultat quantifié qui permet aux candidats d'évaluer leurs compétences et de comparer leurs résultats à ceux des autres candidats.

Le Dr Dang Xuan Cuong a expliqué : « En principe, une fois que les candidats ont terminé le test, le système s'appuiera sur les données de chaque question du test pour estimer les capacités des candidats, y compris des informations sur le nombre de candidats qui peuvent répondre à chaque question correspondante et sur les candidats qui sont, sur le nombre de questions auxquelles chaque candidat peut répondre et sur les questions auxquelles il s'agit.

Les résultats du test permettront au système de générer un modèle pour estimer les aptitudes du candidat. À partir de cette estimation, le score d'évaluation de la pensée sera calculé en le convertissant à l'échelle utilisée par le test (généralement de 0 à 100).

Même si vous répondez correctement à 70 questions, vos résultats au test peuvent être différents.

Le Dr Dang Xuan Cuong a également indiqué que le test d'évaluation de la pensée TSA actuellement en vigueur à l'Université des sciences et technologies de Hanoï est un examen qui combine l'application d'un modèle de réponse à une question à un seul paramètre (prenant uniquement en compte la difficulté de la question) et d'un modèle à deux paramètres (prenant en compte la difficulté et le caractère discriminant de la question). Selon le principe énoncé ci-dessus, un groupe de candidats peut obtenir le même score brut, mais leurs scores au test TSA peuvent différer.

Le Dr Dang Xuan Cuong a donné un exemple : « Imaginons un test comportant 100 questions. Selon l’approche traditionnelle, chaque bonne réponse vaut 1 point. Ainsi, si deux candidats réussissent à répondre correctement à 70 questions, chacun obtiendra 70 points. Cependant, avec l’approche de la théorie de la réponse aux questions, chaque question du test présente un niveau de difficulté différent et la compétence du candidat est estimée en fonction des questions auxquelles il a répondu correctement. Dans le cas des deux candidats mentionnés, si le candidat A réussit des questions plus difficiles que le candidat B, sa compétence sera estimée supérieure. De plus, la difficulté des questions est également un facteur pris en compte dans l’estimation de la compétence des candidats. Par conséquent, la note attribuée à l’étudiant A est supérieure à celle de l’étudiant B. »

En d'autres termes, avec l'approche traditionnelle basée sur les scores bruts, les scores des questions sont calculés avec le même « pondération », ce qui signifie que leur difficulté ou leur facilité n'est pas prise en compte. Dans le cadre de la théorie de la réponse aux questions, les scores des questions ont des « pondérations » différentes, mais cette pondération n'est pas due à la volonté subjective du concepteur du test ; elle est calculée à partir de modèles mathématiques basés sur les données des candidats.

Dans le cadre de l'application de la théorie de la réponse aux questions, l'analyse des données de test utilise également la technique de comparaison afin d'harmoniser les scores des candidats. Chaque année, le test d'évaluation de la pensée comporte plusieurs sessions, et les candidats sont informés des résultats peu après avoir passé le test (sans attendre la session annuelle).

Afin de garantir l'équité du processus d'admission entre les candidats passant l'examen lors de différentes sessions, l'organisateur utilisera le barème de la première session comme barème de référence. Pour les sessions suivantes, lors de l'analyse des résultats, une méthode de comparaison sera appliquée afin de ramener les scores des candidats à ce barème initial, puis de publier les résultats officiels. Ceci facilitera la comparaison des résultats entre les sessions.

D'après le Dr Dang Xuan Cuong, chaque théorie présente des avantages et des inconvénients. « À l'Université des sciences et technologies de Hanoï, l'application de la théorie des questions-réponses à l'examen d'évaluation de la pensée critique implique une grande rigueur ; nous suivons un plan d'action précis afin de perfectionner l'examen chaque année », a déclaré M. Cuong.

Le Dr Dang Xuan Cuong a obtenu son doctorat en sciences de l'éducation à l'Université Flinders (Australie) avec une thèse portant sur la mesure et l'évaluation en éducation. Il possède plus de 18 ans d'expérience dans ce domaine.

Source : https://thanhnien.vn/vi-sao-nhieu-thi-sinh-thay-diem-thi-danh-gia-tu-duy-tsa-khong-nhu-ky-vong-185240525095542657.htm