Por que muitos candidatos acham que suas pontuações na avaliação de pensamento da TSA não são as esperadas?

Este é o segundo ano em que a Universidade de Ciência e Tecnologia de Hanói organiza o exame de avaliação de pensamento TSA de uma nova maneira, o que significa que a estrutura do exame foi ajustada em comparação com 2022 e anos anteriores. Em particular, além de ajustar a estrutura do exame, a Universidade de Ciência e Tecnologia de Hanói aplicou uma nova teoria de avaliação, a Teoria da Resposta ao Questionário (TRI), para avaliar a qualidade das questões e calcular as notas dos candidatos.

Isso fez com que os candidatos não pudessem se autoavaliar após a conclusão do teste, tendo que aguardar os resultados da análise dos dados coletados. Consequentemente, ao receberem a notificação dos resultados, muitos candidatos ficam confusos, pois as notas obtidas não correspondem às suas expectativas.

Muitos alunos estão bastante interessados ​​no teste de avaliação de pensamento TSA, organizado pela Universidade de Ciência e Tecnologia de Hanói.

As notas dos testes são um modelo quantificado da estimativa da capacidade do candidato.

Para aliviar essa preocupação dos candidatos, o jornal Thanh Nien entrevistou o Dr. Dang Xuan Cuong, cientista independente com muitos anos de pesquisa e implementação em avaliação e mensuração educacional , e um dos consultores da Universidade de Ciência e Tecnologia de Hanói na implementação do teste de avaliação de pensamento TSA nos últimos dois anos.

Segundo o Dr. Dang Xuan Cuong, a teoria da resposta à pergunta baseia-se em modelos matemáticos para explicar a relação entre a capacidade do candidato e as questões que a avaliam. Com essa abordagem teórica, os parâmetros das questões (como dificuldade, discriminação, probabilidade de acerto por palpite, etc.) e a capacidade do candidato serão quantificados com base nos dados do teste aplicado ao grupo de candidatos participantes. Portanto, a capacidade do candidato estimada pela teoria da resposta à pergunta será diferente daquela avaliada pelo método de pontuação tradicional.

Os candidatos são avaliados antes de fazerem o teste de raciocínio da TSA.

Na avaliação tradicional, a nota da prova é simplesmente a soma mecânica das notas das questões, de acordo com um guia de correção específico. Os especialistas chamam isso de nota bruta. Com a nota bruta, a maioria dos candidatos pode confiar nas respostas para corrigir a própria prova e, mesmo que a prova seja composta apenas por questões objetivas de múltipla escolha, os candidatos podem se autoavaliar após realizá-la.

Na abordagem da teoria de resposta a perguntas, a nota do teste é um resultado comunicado ao candidato após um processo de análise dos dados coletados durante a prova. Essa análise é uma etapa complexa em termos de conhecimento especializado, realizada por meio de softwares específicos e cuidadosamente interpretada através de indicadores estatísticos. Em essência, a nota do teste é um resultado quantificado, que serve como base para que os candidatos conheçam suas habilidades e comparem seus resultados com os dos demais candidatos que realizaram o exame.

O Dr. Dang Xuan Cuong explicou: "Em princípio, após os candidatos terminarem o teste, o sistema utilizará os dados de cada questão para estimar a capacidade dos candidatos, incluindo informações sobre quantos candidatos conseguem responder a cada questão correspondente e quais são esses candidatos, quantas questões cada candidato consegue responder e quais são essas questões."

Os dados dos resultados do teste do participante ajudarão o sistema a gerar um modelo para estimar sua capacidade. A partir dessa capacidade estimada, a pontuação da avaliação de raciocínio será calculada, convertendo-a para a escala utilizada no teste (geralmente de 0 a 100).

Mesmo que você acerte 70 questões, sua pontuação no teste pode ser diferente.

O Dr. Dang Xuan Cuong também afirmou que o atual teste de avaliação de raciocínio TSA da Universidade de Ciência e Tecnologia de Hanói é um exame que combina a aplicação de um modelo de resposta a perguntas com parâmetro único (considerando apenas a dificuldade da questão) e um modelo com dois parâmetros (considerando a dificuldade e a discriminação da questão). Com base nesse princípio, um grupo de candidatos pode ter a mesma pontuação bruta, mas as pontuações no teste TSA variam entre os alunos.

O Dr. Dang Xuan Cuong deu um exemplo: "Suponha que a prova tenha 100 questões. De acordo com a abordagem tradicional, cada resposta correta vale 1 ponto. Então, se dois candidatos conseguirem responder 70 questões juntos, cada um receberá 70 pontos. No entanto, com a abordagem da teoria da resposta à pergunta, cada questão da prova terá um nível de dificuldade diferente e a capacidade do candidato será estimada com base nas questões específicas que ele respondeu corretamente. E com os dois candidatos mencionados aqui, se o candidato A conseguir responder a questões mais difíceis do que o candidato B, a capacidade estimada do candidato A será maior do que a do candidato B. Além disso, a distinção entre as questões também é um fator usado na estimativa da capacidade dos candidatos. Consequentemente, a pontuação anunciada do aluno A é maior do que a do aluno B."

Simplificando, na abordagem tradicional baseada em pontuações brutas, as pontuações das questões são calculadas com o mesmo "peso", o que significa que a dificuldade e a facilidade das questões não são levadas em consideração. Na teoria de resposta à pergunta, as pontuações das questões terão "pesos" diferentes; no entanto, esse peso não se deve à vontade subjetiva do criador do teste, mas é calculado com base em modelos matemáticos a partir dos dados dos candidatos.

No processo de aplicação da teoria de resposta a perguntas, a análise dos dados dos testes também utiliza a técnica de comparação para trazer as pontuações dos candidatos para uma escala comum. A cada ano, o teste de avaliação do raciocínio passa por várias rodadas, e os candidatos são notificados dos resultados logo após a realização da prova (sem precisar esperar até a próxima edição anual).

Para garantir a equidade no processo de admissão entre os candidatos que realizam o exame em diferentes fases, a organização do exame utilizará a escala da primeira fase como escala original. Nas fases subsequentes, durante a análise dos resultados, será aplicada uma técnica de comparação para ajustar as notas dos candidatos da fase seguinte à escala original, divulgando-se, então, os resultados oficiais. Isso facilitará a comparação dos resultados entre as fases.

Segundo o Dr. Dang Xuan Cuong, cada teoria tem suas vantagens e desvantagens. "Com a aplicação da teoria de perguntas e respostas na Universidade de Ciência e Tecnologia de Hanói para o exame de avaliação de raciocínio, também somos muito cuidadosos, seguindo um roteiro específico para aperfeiçoar o exame a cada ano", disse o Sr. Cuong.

O Dr. Dang Xuan Cuong é doutor em Educação pela Universidade Flinders, na Austrália, com uma tese sobre avaliação e mensuração educacional. Ele possui mais de 18 anos de experiência nessa área.

Fonte: https://thanhnien.vn/vi-sao-nhieu-thi-sinh-thay-diem-thi-danh-gia-tu-duy-tsa-khong-nhu-ky-vong-185240525095542657.htm