Beoordelingsmethode voor de TSA Thinking Skills Assessment-test.

NDO - Een opvallend kenmerk van de scoringsmethode die gebruikt wordt in de TSA Thinking Assessment van de Hanoi University of Science and Technology is dat er geen traditionele scoringsmethoden worden gebruikt, maar in plaats daarvan vraag-antwoordtheorie wordt toegepast om de scores van kandidaten te berekenen. Dit maakt een nauwkeurige en betrouwbare inschatting van de vaardigheden van kandidaten mogelijk.

De Thinking Skills Assessment (TSA)-test aan de Hanoi University of Science and Technology is bedoeld om drie fundamentele denkvaardigheden bij studenten te evalueren: wiskundig denken, leesbegrip en wetenschappelijk/probleemoplossend denken – allemaal cruciale elementen die studenten in staat stellen uit te blinken in het hoger onderwijs .

Het examen bestaat daarom uit drie onderdelen: Wiskundig Denken (60 minuten), Begrijpend Lezen (30 minuten) en Wetenschappelijk Denken/Probleemoplossing (60 minuten). Dit zijn drie onafhankelijke onderdelen en de examenvragen zijn gericht op het beoordelen van het denkvermogen van de kandidaat in elk onderdeel, en niet op het direct toetsen van kennis van een specifiek onderwerp.

Het TSA-examen bestaat uit drie onafhankelijke onderdelen (Wiskundig Redeneren, Leesvaardigheid en Wetenschappelijk Redeneren/Probleemoplossing) die zich richten op het beoordelen van de vaardigheden van kandidaten, in plaats van direct de kennis van een specifiek onderwerp te toetsen.

Er zijn een paar belangrijke punten met betrekking tot de scoringsmethode van de TSA Competency Assessment Test.

De afdeling Toelating en Loopbaanbegeleiding van de Technische Universiteit van Hanoi heeft verklaard dat de traditionele beoordelingsmethode gebruikmaakt van ruwe scores om de eindresultaten van het examen te bepalen. Volgens de klassieke toetsingstheorie is de ruwe score van een examen de som van de scores van de individuele vragen in dat examen.

Bijvoorbeeld, bij een toets met 100 vragen levert elk correct antwoord de leerling 1 punt op. Als een leerling 70 vragen correct beantwoordt, krijgt hij of zij 70 punten. Deze score wordt de ruwe score genoemd en wordt gebruikt om het eindresultaat te bepalen en te vergelijken met de scores van andere leerlingen.

Een van de nadelen van het gebruik van ruwe scores is dat het moeilijk is om de vaardigheden van kandidaten met dezelfde ruwe score te onderscheiden wanneer ze dezelfde test op hetzelfde moment afleggen. Bovendien verandert de vaardigheid van een kandidaat wanneer hij of zij twee tests van verschillende moeilijkheidsgraden tegelijkertijd aflegt, wanneer de scores worden berekend op basis van ruwe scores. Zo zullen kandidaten die bijvoorbeeld in één testsessie 70 vragen correct beantwoorden, dezelfde ruwe score van 70 punten behalen.

In werkelijkheid hebben deze kandidaten mogelijk verschillende vragenreeksen correct beantwoord, en de moeilijkheidsgraad van de vragen in het examen varieert ook. Een score van 70 geeft daarom geen nauwkeurig beeld van de vaardigheden van deze kandidaten.

Om dit probleem aan te pakken, maken grote examens in landen over de hele wereld gebruik van moderne onderwijskundige meettheorieën om de vaardigheden van kandidaten nauwkeuriger en betrouwbaarder in te schatten. Een van deze theorieën is de vraag-antwoordtheorie. Deze theorie veronderstelt dat elke kandidaat een vraag op een toets beantwoordt met een bepaald vaardigheidsniveau, en dat kandidaten met een hoog vaardigheidsniveau een grotere kans hebben om een ​​bepaalde vraag correct te beantwoorden dan kandidaten met een laag vaardigheidsniveau. Op basis van deze theorie kunnen parameters zoals de moeilijkheidsgraad en het onderscheidingsvermogen van vragen, evenals de vaardigheden van de kandidaten, worden gekwantificeerd, en deze factoren zijn onafhankelijk van elkaar.

Dit betekent dat de parameters specifiek zijn voor de vraag, onafhankelijk van de steekproef van kandidaten die die vraag beantwoorden, en omgekeerd, dat het vermogen van de kandidaten constant is voor alle vragen die ze beantwoorden. Daarom zal het schatten van het vermogen van kandidaten betrouwbaarder zijn dan het berekenen ervan op basis van ruwe scores.

Op basis van de testresultaten van de kandidaten bepaalt het beoordelingsalgoritme het vereiste denkniveau voor elke vraag, afhankelijk van het percentage kandidaten dat de vraag correct heeft beantwoord. Het principe is dat vragen met minder correcte antwoorden als vragen van een hoger denkniveau worden beschouwd, terwijl vragen met meer correcte antwoorden als vragen van een lager denkniveau worden beschouwd.

De TSA-test (Tactical Assessment for Thinking Skills) aan de Technische Universiteit van Hanoi maakt gebruik van de vraag-antwoordtheorie om de TSA-scores van studenten te berekenen. Met deze methode wordt, zelfs als kandidaten dezelfde basisscore hebben, hun overeenkomstige vaardigheidsniveau geschat op basis van de moeilijkheidsgraad van de vragen die ze hebben beantwoord. Deze score wordt vervolgens omgerekend naar een schaal van 100 punten.

De beoordelingscriteria worden vastgesteld nadat de testresultaten van elke kandidaat beschikbaar zijn. Op basis van de testresultaten van de kandidaten bepaalt het beoordelingsalgoritme het vereiste denkniveau voor elke vraag, afhankelijk van het percentage kandidaten dat de vraag correct heeft beantwoord. Het principe is dat vragen met minder correcte antwoorden als vragen van een hoog denkniveau worden beschouwd, terwijl vragen met meer correcte antwoorden als vragen van een laag denkniveau worden beschouwd. De beoordelingscriteria zijn gebaseerd op het principe dat vragen met een hoog denkniveau hogere scores krijgen, overeenkomend met het percentage correcte antwoorden, en vragen met een laag denkniveau lagere scores krijgen, overeenkomend met het percentage correcte antwoorden.

Om eerlijkheid tussen de verschillende examenrondes te garanderen, maakt het TSA-examen aan de Technische Universiteit van Hanoi bovendien gebruik van een gestandaardiseerde set 'brugvragen' – ook wel bekend als overbruggingsvragen of gemeenschappelijke vragen – om de beoordelingscriteria tussen de examenonderdelen op één schaal te brengen. Deze technologie zorgt ervoor dat kandidaten in verschillende examenrondes op dezelfde schaal worden beoordeeld, waardoor eerlijke resultaten tussen de examenrondes worden gewaarborgd.

Tijdens het toelatingsseizoen van 2024 namen bijna 50.000 deelnemers, in totaal ongeveer 21.000 kandidaten, deel aan de TSA Thinking Skills Assessment-test aan de Technische Universiteit van Hanoi. De resultaten van deze test werden door meer dan 50 universiteiten gebruikt voor hun reguliere toelatingsprocedure voor bacheloropleidingen. In 2025 zullen de Thinking Skills Assessment-tests naar verwachting tussen januari en april worden afgenomen.

Bron: https://nhandan.vn/phuong-method-of-scoring-the-tsa-capacity-assessment-exam-post845455.html