Pourquoi de nombreux candidats constatent-ils que leurs résultats d’évaluation de réflexion TSA ne correspondent pas à leurs attentes ?

Cette année, l'Université des Sciences et Technologies de Hanoï organise pour la deuxième fois l'examen d'évaluation de la pensée de la TSA selon une nouvelle méthode. La structure de l'examen a été ajustée par rapport à 2022 et aux années précédentes. Outre cet ajustement, l'Université des Sciences et Technologies de Hanoï a appliqué une nouvelle théorie d'évaluation, la théorie des questions-réponses (TRI), pour évaluer la qualité des questions et calculer les notes des candidats.

Cela a empêché les candidats de s'auto-évaluer après avoir terminé le test, mais les a contraints à attendre les résultats de l'analyse de leurs données. Par conséquent, après avoir reçu les résultats, de nombreux candidats sont désorientés, car les notes obtenues ne correspondent pas à leurs attentes.

De nombreux étudiants sont très intéressés par le test d’évaluation de la réflexion TSA organisé par l’Université des sciences et technologies de Hanoi.

Les résultats des tests sont un modèle quantifié de l’estimation des capacités des candidats.

Pour apaiser cette inquiétude des candidats, le journal Thanh Nien a interviewé le Dr Dang Xuan Cuong, un scientifique indépendant avec de nombreuses années de recherche et de mise en œuvre dans l'évaluation et la mesure de l'éducation , l'une des personnes qui ont consulté l'Université des sciences et technologies de Hanoi pour mettre en œuvre le test d'évaluation de la pensée TSA au cours des 2 dernières années.

Selon le Dr Dang Xuan Cuong, la théorie des questions-réponses s'appuie sur des modèles mathématiques pour expliquer la relation entre les compétences du candidat et les questions qui les mesurent. Grâce à cette approche théorique, les paramètres des questions (difficulté, discrimination, devinette, etc.) et les compétences du candidat sont quantifiés à partir des données du groupe de candidats participant au test. Par conséquent, les compétences du candidat estimées à partir de la théorie des questions-réponses diffèrent de la méthode de notation traditionnelle.

Les candidats sont testés avant de passer le test d'évaluation de la réflexion de la TSA.

Avec la notation traditionnelle, le score du test est simplement l'addition mécanique des scores des questions du test selon un guide de notation spécifique. Les experts appellent cela le score brut. Grâce à ce score brut, la plupart des candidats peuvent s'appuyer sur les réponses pour noter leur propre test. Même s'il ne s'agit que de questions objectives à choix multiples, les candidats peuvent s'auto-évaluer après l'examen.

Selon la théorie des questions-réponses, le score au test est un résultat annoncé au candidat après analyse de ses données. Cette étape, relativement complexe et exigeante en termes d'expertise, est réalisée à l'aide d'un logiciel spécialisé et soigneusement analysée à l'aide d'indicateurs statistiques. En substance, le score au test est un résultat quantifié, servant de base aux candidats pour évaluer leurs compétences et pour comparer leurs résultats à ceux des autres candidats à l'examen.

Le Dr Dang Xuan Cuong a expliqué : « En principe, une fois que les candidats ont terminé le test, le système s'appuiera sur les données de chaque question du test pour estimer la capacité des candidats, y compris des informations sur le nombre de candidats qui peuvent répondre à chaque question correspondante et de quels candidats il s'agit, le nombre de questions que chaque candidat peut répondre et de quelles questions il s'agit.

Les données de résultats du candidat aideront le système à générer un modèle permettant d'estimer ses compétences. À partir de cette estimation, le score de l'évaluation de la pensée sera calculé en le convertissant à l'échelle utilisée par le test (généralement de 0 à 100).

Même si vous répondez correctement à 70 questions, vos résultats au test peuvent être différents.

Le Dr Dang Xuan Cuong a également expliqué que l'examen d'évaluation de la pensée TSA actuel de l'Université des sciences et technologies de Hanoï combine un modèle de réponse à un paramètre (qui ne prend en compte que la difficulté de la question) et deux paramètres (qui prennent en compte la difficulté et la discrimination de la question). Selon ce principe, un groupe de candidats obtient le même score brut, mais les scores TSA des étudiants diffèrent.

Le Dr Dang Xuan Cuong a donné un exemple : « Supposons que le test comporte 100 questions. Selon l’approche traditionnelle, chaque bonne réponse vaut 1 point. Ainsi, si deux candidats parviennent à répondre à 70 questions, chacun obtiendra 70 points. Cependant, avec la théorie des questions-réponses, chaque question du test aura un niveau de difficulté différent et la capacité du candidat sera évaluée en fonction des questions spécifiques auxquelles il aura répondu correctement. Et avec les deux candidats mentionnés ici, si le candidat A peut répondre à des questions plus difficiles que le candidat B, sa capacité estimée sera supérieure à celle du candidat B. De plus, la distinction des questions est également un facteur pris en compte dans l’estimation des capacités des candidats. Il en résulte que le score annoncé de l’étudiant A est supérieur à celui de l’étudiant B. »

En termes plus simples, avec l'approche traditionnelle basée sur les scores bruts, les scores des questions sont calculés avec la même pondération, ce qui signifie que la difficulté et la facilité de ces questions ne sont pas prises en compte. Pour la théorie des questions-réponses, les scores des questions auront des pondérations différentes. Cependant, cette pondération n'est pas due à la volonté subjective du concepteur du test, mais est calculée à partir de modèles mathématiques basés sur les données du candidat.

Dans le cadre de l'application de la théorie des questions-réponses, l'analyse des données du test utilise également la technique de comparaison pour ramener les scores des candidats à une échelle commune. Chaque année, le test d'évaluation de la pensée comporte plusieurs tours, et les candidats sont informés des résultats peu après le test (sans attendre la tenue du test annuel).

Afin de garantir l'équité du processus d'admission entre les candidats se présentant aux différents tours, l'organisateur de l'examen utilisera le barème du premier tour comme barème initial. Pour les tours suivants, lors de l'analyse des résultats, une technique d'égalisation sera appliquée pour ramener les scores des candidats se présentant au tour suivant au barème initial, puis les résultats officiels des candidats seront communiqués. Cela facilitera la comparaison des résultats entre les tours.

Selon le Dr Dang Xuan Cuong, chaque théorie présente ses avantages et ses inconvénients. « Avec l'application de la théorie des questions-réponses à l'Université des sciences et technologies de Hanoï pour l'examen d'évaluation de la pensée, nous sommes également très prudents et suivons une feuille de route spécifique pour réussir l'examen chaque année », a déclaré M. Cuong.

Le Dr Dang Xuan Cuong a obtenu son doctorat en éducation avec une thèse sur la mesure et l'évaluation de l'éducation à l'Université Flinders, en Australie. Il possède plus de 18 ans d'expérience dans ce domaine.

Source : https://thanhnien.vn/vi-sao-nhieu-thi-sinh-thay-diem-thi-danh-gia-tu-duy-tsa-khong-nhu-ky-vong-185240525095542657.htm