¿Por qué muchos candidatos encuentran que sus puntuaciones en la evaluación de pensamiento de TSA no son las esperadas?

Este es el segundo año que la Universidad de Ciencia y Tecnología de Hanói organiza el examen de evaluación del pensamiento TSA de una manera innovadora, lo que significa que la estructura del examen se ha ajustado en comparación con 2022 y años anteriores. En particular, además de ajustar la estructura del examen, la Universidad de Ciencia y Tecnología de Hanói ha aplicado una nueva teoría de evaluación, la teoría de preguntas y respuestas (TRI), para evaluar la calidad de las preguntas y calcular las puntuaciones de los candidatos.

Esto ha provocado que los candidatos no puedan calificarse tras completar el examen, sino que tengan que esperar los resultados del análisis de sus datos. Por lo tanto, tras recibir el anuncio de los resultados, muchos candidatos se sienten confundidos porque las calificaciones obtenidas no son las que esperaban.

Muchos estudiantes están muy interesados ​​en la prueba de evaluación de pensamiento TSA organizada por la Universidad de Ciencia y Tecnología de Hanoi.

Los puntajes de las pruebas son un modelo cuantificado de la estimación de la capacidad del candidato.

Para aliviar esta preocupación de los candidatos, el periódico Thanh Nien entrevistó al Dr. Dang Xuan Cuong, un científico independiente con muchos años de investigación e implementación en evaluación y medición educativa , una de las personas que asesoró a la Universidad de Ciencia y Tecnología de Hanoi para implementar la prueba de evaluación de pensamiento TSA durante los últimos 2 años.

Según el Dr. Dang Xuan Cuong, la teoría de respuesta a preguntas se basa en modelos matemáticos para explicar la relación entre la capacidad del candidato y las preguntas que la miden. Con este enfoque teórico, los parámetros de las preguntas (como la dificultad, la discriminación, la capacidad de adivinación, etc.) y la capacidad del candidato se cuantifican con base en los datos de la prueba del grupo de candidatos participantes. Por lo tanto, la capacidad del candidato estimada a partir de la teoría de respuesta a preguntas será diferente a la del método de puntuación tradicional.

Los candidatos son evaluados antes de tomar el examen de evaluación de pensamiento de la TSA.

Con la calificación tradicional, la puntuación del examen es simplemente la suma mecánica de las puntuaciones de las preguntas según una guía de calificación específica. Los expertos lo llaman puntuación bruta. Con esta puntuación, la mayoría de los candidatos pueden basarse en las respuestas para calificar su propio examen, e incluso si el examen solo consta de preguntas objetivas de opción múltiple, los candidatos pueden calificarse a sí mismos después de realizarlo.

Con el enfoque de la teoría de preguntas y respuestas, la puntuación del examen es un resultado que se anuncia al candidato tras analizar sus datos. Este es un paso complejo en términos de experiencia, realizado mediante software especializado y cuidadosamente evaluado mediante indicadores estadísticos. En esencia, la puntuación del examen es un resultado cuantificado que sirve de base para que los candidatos conozcan sus habilidades y para comparar sus resultados con los de los demás candidatos.

El Dr. Dang Xuan Cuong explicó: "En principio, una vez que los candidatos finalizan el examen, el sistema se basará en los datos de cada pregunta para estimar su capacidad, incluyendo información sobre cuántos candidatos pueden responder cada pregunta y quiénes son, cuántas preguntas puede responder cada candidato y cuáles son".

Los datos del resultado de la prueba ayudarán al sistema a generar un modelo para estimar su capacidad. A partir de esta capacidad estimada, se calculará la puntuación de la evaluación de pensamiento convirtiéndola a la escala utilizada en la prueba (generalmente de 0 a 100).

Incluso si responde correctamente 70 preguntas, sus calificaciones en el examen pueden ser diferentes.

El Dr. Dang Xuan Cuong también explicó que el actual examen de evaluación del pensamiento TSA de la Universidad de Ciencia y Tecnología de Hanói combina un modelo de respuesta de un parámetro (que solo considera la dificultad de la pregunta) y dos parámetros (que consideran la dificultad y la discriminación de la pregunta). Según el principio mencionado, un grupo de candidatos tiene la misma puntuación bruta, pero las puntuaciones de los estudiantes en la prueba TSA son diferentes.

El Dr. Dang Xuan Cuong dio un ejemplo: "Supongamos que el examen tiene 100 preguntas. Según el enfoque tradicional, cada respuesta correcta vale 1 punto. Entonces, si dos candidatos pueden responder 70 preguntas, cada uno obtendrá 70 puntos. Sin embargo, con el enfoque de la teoría de respuesta a preguntas, cada pregunta del examen tendrá un nivel de dificultad diferente y la capacidad del candidato se estimará en función de las preguntas específicas que haya respondido correctamente. Y con los dos candidatos mencionados, si el candidato A puede responder preguntas más difíciles que el candidato B, la capacidad estimada del candidato A será mayor que la del candidato B. Además, la distinción de las preguntas también es un factor que se utiliza para estimar las habilidades de los candidatos. A partir de ahí, el resultado es que la puntuación anunciada del estudiante A es mayor que la del estudiante B".

En resumen, con el enfoque tradicional basado en puntuaciones brutas, las puntuaciones de las preguntas se calculan con el mismo peso, lo que significa que no se calculan la dificultad ni la facilidad de esas preguntas. Para la teoría de respuesta a preguntas, las puntuaciones de las preguntas tendrán diferentes pesos; sin embargo, este peso no se debe a la voluntad subjetiva del diseñador de la prueba, sino que se calcula con base en modelos matemáticos a partir de los datos de la prueba del candidato.

En el proceso de aplicación de la teoría de la respuesta a preguntas, el análisis de los datos de la prueba también utiliza la técnica de comparación para ajustar las puntuaciones de los candidatos a una escala común. Cada año, la prueba de evaluación del pensamiento consta de varias rondas, y los candidatos reciben los resultados poco después de realizarla (sin esperar a la prueba anual).

Para garantizar la imparcialidad del proceso de admisión entre los candidatos que se presentan al examen en las diferentes rondas, el organizador del examen utilizará la escala de la primera ronda como escala original. Para las rondas posteriores, durante el análisis de los resultados del examen, se aplica la técnica de igualación para que las puntuaciones de los candidatos que se presentan al examen en la ronda siguiente vuelvan a la escala original, y posteriormente se publican los resultados oficiales de los candidatos. Esto facilitará la comparación de los resultados del examen entre rondas.

Según el Dr. Dang Xuan Cuong, cada teoría tiene sus ventajas y desventajas. "Con la aplicación de la teoría de preguntas y respuestas en la Universidad de Ciencia y Tecnología de Hanói para el examen de evaluación del pensamiento, también somos muy cautelosos, siguiendo una hoja de ruta específica para completar el examen cada año", afirmó el Sr. Cuong.

El Dr. Dang Xuan Cuong obtuvo su doctorado en Educación con una tesis sobre medición y evaluación educativa en la Universidad de Flinders (Australia). Cuenta con más de 18 años de experiencia en este campo.

Fuente: https://thanhnien.vn/vi-sao-nhieu-thi-sinh-thay-diem-thi-danh-gia-tu-duy-tsa-khong-nhu-ky-vong-185240525095542657.htm