Bewertungsmethode der TSA-Denkfähigkeitsbeurteilung

NDO – Ein bemerkenswerter Punkt bei der Bewertungsmethode des TSA Thinking Assessment der Hanoi University of Science and Technology ist, dass nicht die traditionelle Bewertungsmethode verwendet wird, sondern die Frage-Antwort-Theorie bei der Berechnung der Punktzahl des Kandidaten angewendet wird, um die Fähigkeiten des Kandidaten genau und zuverlässig einschätzen zu können.

Der Thinking Skills Assessment (TSA)-Test der Hanoi University of Science and Technology zielt darauf ab, drei grundlegende Denkfähigkeiten der Studierenden zu beurteilen: Mathematisches Denken, Leseverständnis und wissenschaftliches Denken/Problemlösen – wichtige Faktoren, die den Studierenden helfen, im universitären Bildungsumfeld optimal zu studieren.

Der Test besteht aus drei Teilen: Mathematisches Denken (60 Minuten), Leseverständnis (30 Minuten) und Wissenschaftliches Denken/Problemlösen (60 Minuten). Diese drei Teile sind unabhängig voneinander. Die Testfragen zielen darauf ab, das Denkvermögen der Kandidaten in jedem Teil zu beurteilen und nicht direkt deren Fachwissen zu prüfen.

Die TSA-Prüfung besteht aus drei unabhängigen Abschnitten (Mathematisches Denken, Leseverständnis, Wissenschaftliches Denken/Problemlösen), die sich auf die Beurteilung der Fähigkeiten der Kandidaten konzentrieren, ohne direkt das Wissen über ein bestimmtes Fachgebiet zu testen.

Es gibt einige Punkte, die hinsichtlich der Bewertungsmethode des TSA-Eignungstests beachtet werden sollten.

Die Zulassungs- und Studienberatungsstelle der Technischen Universität Hanoi erklärte, dass die Abschlussprüfung traditionell anhand der Rohpunktzahl bewertet wird. Gemäß der klassischen Multiple-Choice-Theorie entspricht die Rohpunktzahl der Summe der Punktzahlen der einzelnen Fragen der jeweiligen Prüfung.

In einem Test mit beispielsweise 100 Fragen erhält der Kandidat für jede richtige Antwort einen Punkt. Beantwortet er 70 Fragen richtig, erhält er 70 Punkte. Diese Punktzahl wird als Rohpunktzahl bezeichnet und dient sowohl der Auswertung der Ergebnisse als auch dem Vergleich mit den Ergebnissen anderer Kandidaten.

Ein Nachteil der Verwendung von Rohpunktzahlen besteht darin, dass es schwierig ist, die Fähigkeiten von Kandidaten mit derselben Rohpunktzahl zu vergleichen, wenn diese denselben Test zur selben Zeit absolvieren. Zudem ändert sich die tatsächliche Leistungsfähigkeit von Kandidaten, wenn sie zwei Tests unterschiedlichen Schwierigkeitsgrades gleichzeitig bearbeiten und die daraus resultierenden Fähigkeitswerte anhand von Rohpunktzahlen berechnet werden. Beispielsweise erhalten Kandidaten, die in einer Testsitzung 70 Fragen richtig beantworten, dieselbe Rohpunktzahl von 70 Punkten.

In Wirklichkeit haben diese Kandidaten möglicherweise unterschiedliche Fragensätze richtig beantwortet, und der Schwierigkeitsgrad dieser Fragen in der Prüfung variiert ebenfalls, sodass eine Punktzahl von 70 die Fähigkeiten dieser Kandidaten nicht genau widerspiegelt.

Um diesem Problem zu begegnen, haben große Prüfungen weltweit moderne pädagogische Messtheorien übernommen, um die Fähigkeiten der Kandidaten genauer und zuverlässiger einzuschätzen. Eine dieser Theorien ist die Anwendung der Frage-Antwort-Theorie. Diese Theorie besagt, dass jeder Kandidat eine Testfrage mit einem bestimmten Fähigkeitsniveau beantwortet und dass Kandidaten mit hohem Fähigkeitsniveau eine höhere Wahrscheinlichkeit haben, eine Frage richtig zu beantworten als Kandidaten mit niedrigem Fähigkeitsniveau. Auf Grundlage dieser Theorie lassen sich Parameter wie der Schwierigkeitsgrad und die Trennschärfe von Fragen sowie die Fähigkeiten der Kandidaten quantifizieren, wobei diese Faktoren voneinander unabhängig sind.

Das bedeutet, dass die Parameter spezifisch für die jeweilige Frage sind und unabhängig von der Stichprobe der Kandidaten, die diese Frage beantworten. Umgekehrt ist die Fähigkeit des Kandidaten unabhängig von den beantworteten Fragen. Daher ist die Schätzung der Kandidatenfähigkeit zuverlässiger als die Rohpunktzahlmethode.

Anhand der Testergebnisse der Kandidaten ermittelt der Bewertungsalgorithmus den Schwierigkeitsgrad jeder Frage anhand des Prozentsatzes der Kandidaten, die die Frage richtig beantwortet haben. Demnach gelten Fragen mit wenigen richtigen Antworten als anspruchsvoll, Fragen mit vielen richtigen Antworten hingegen als weniger anspruchsvoll.

Der TSA-Denkfähigkeitstest der Technischen Universität Hanoi verwendet die Frage-Antwort-Theorie zur Berechnung der TSA-Punktzahl. Obwohl die Kandidaten dieselbe Rohpunktzahl erreichen, wird anhand des Schwierigkeitsgrades der Fragen, die jeder Kandidat beantworten kann, das entsprechende Fähigkeitsniveau geschätzt und anschließend auf eine 100-Punkte-Skala umgerechnet.

Die Bewertungsskala wird nach Auswertung der Testergebnisse der Kandidaten nach jedem Test erstellt. Basierend auf den Testergebnissen ermittelt der Bewertungsalgorithmus den Schwierigkeitsgrad jeder Frage anhand des Prozentsatzes der Kandidaten, die diese Frage richtig beantwortet haben. Demnach gelten Fragen mit wenigen richtigen Antworten als anspruchsvoll, Fragen mit vielen richtigen Antworten hingegen als weniger anspruchsvoll. Die Bewertungsskala basiert auf dem Prinzip, dass anspruchsvolle Fragen proportional zum Prozentsatz der richtigen Antworten hoch und weniger anspruchsvolle Fragen proportional zum Prozentsatz der richtigen Antworten niedrig bewertet werden.

Um die Fairness zwischen den Prüfungsterminen zu gewährleisten, verwendet die TSA-Prüfung der Technischen Universität Hanoi zudem einen standardisierten Fragenkatalog – auch Brückenfragen oder gemeinsame Fragen genannt –, um die Bewertungskriterien anzugleichen. Dadurch wird sichergestellt, dass die Kandidaten in verschiedenen Prüfungsterminen nach denselben Kriterien bewertet werden und somit faire Ergebnisse erzielt werden.

Im Rahmen des Hochschulzulassungsverfahrens 2024 nahmen fast 50.000 Bewerbungen mit insgesamt rund 21.000 Kandidaten am TSA-Denkfähigkeitstest der Technischen Universität Hanoi teil. Die Testergebnisse wurden von über 50 Universitäten für das reguläre Zulassungsverfahren genutzt. Für 2025 sind die Denkfähigkeitstests voraussichtlich von Januar bis April geplant.

Quelle: https://nhandan.vn/phuong-phap-cham-diem-cua-bai-thi-danh-gia-nang-luc-tsa-post845455.html