Metoda hodnocení v rámci TSA Thinking Assessment

NDO - Pozoruhodným bodem metody hodnocení TSA Thinking Assessment Hanojské univerzity vědy a technologie je, že nepoužívá tradiční metodu hodnocení, ale při výpočtu skóre kandidáta aplikuje teorii otázek a odpovědí, aby bylo možné přesně a spolehlivě odhadnout schopnosti kandidáta.

Test Thinking Skills Assessment (TSA) Hanojské univerzity vědy a technologie si klade za cíl posoudit tři základní myšlenkové schopnosti studentů, a to: matematické myšlení, porozumění čtenému textu a vědecké myšlení/řešení problémů – důležité faktory, které studentům pomáhají co nejlépe studovat v prostředí univerzitního vzdělávání .

Test se tedy skládá ze 3 částí: Matematické myšlení (60 minut), Čtení s porozuměním (30 minut) a Vědecké myšlení/řešení problémů (60 minut). Jedná se o 3 nezávislé části, testové otázky se zaměří na posouzení myšlenkových schopností kandidáta v každé části, nikoli na přímé ověřování znalostí z daného předmětu.

Zkouška TSA se skládá ze tří nezávislých částí (Matematické myšlení, Čtení s porozuměním, Vědecké myšlení/Řešení problémů), které se zaměřují na posouzení schopností kandidátů, aniž by přímo testovaly znalosti jakéhokoli předmětu.

Ohledně metody hodnocení v testu způsobilosti TSA je třeba zmínit několik bodů.

Oddělení přijímacího řízení a kariérního poradenství Hanojské univerzity vědy a techniky uvedlo, že tradiční metodou hodnocení je použití hrubého skóre k vyhodnocení závěrečné zkoušky. Podle klasické teorie výběru odpovědí je hrubé skóre zkoušky součtem skóre z otázek v dané zkoušce.

Například v testu se 100 otázkami získá kandidát za každou správnou odpověď 1 bod. Pokud kandidát správně odpoví na 70 otázek, získá 70 bodů. Toto skóre se nazývá hrubé skóre a používá se k hodnocení výsledků a také k porovnání se skóre ostatních kandidátů.

Jednou z nevýhod používání hrubých skóre je, že je obtížné rozlišit schopnosti kandidátů se stejným hrubým skóre, pokud absolvují stejný test ve stejnou dobu. Kromě toho se při výpočtu skóre schopností pomocí hrubých skóre schopnosti kandidátů změní, pokud absolvují dva testy různé obtížnosti ve stejnou dobu. Například v testovacím období budou mít kandidáti, kteří správně odpoví na 70 otázek, stejné hrubé skóre 70 bodů.

Ve skutečnosti tito kandidáti mohli správně odpovědět na různé sady otázek a obtížnost těchto otázek ve zkoušce se také liší, takže skóre 70 přesně neodráží schopnosti těchto kandidátů.

Aby se tento problém vyřešil, hlavní zkoušky po celém světě přijaly moderní teorie měření vzdělávacích schopností, aby přesněji a spolehlivěji odhadly schopnosti kandidátů. Jednou z nich je aplikace teorie otázek a odpovědí. Tato teorie předpokládá, že každý kandidát odpoví na otázku v testu s určitou úrovní schopností a že kandidáti s vysokými schopnostmi budou mít vyšší pravděpodobnost správné odpovědi na jakoukoli otázku než kandidáti s nízkými schopnostmi. Na základě této teorie lze kvantifikovat parametry, jako je obtížnost a rozlišitelnost otázek, a také schopnosti kandidátů, a tyto faktory jsou na sobě nezávislé.

To znamená, že parametry jsou specifické pro danou otázku, nezávislé na vzorku kandidátů, kteří na tuto otázku odpovídají, a naopak, schopnosti kandidáta jsou invariantní vůči otázkám, na které odpovídá. Odhad schopností kandidáta bude proto spolehlivější než metoda hrubého skóre.

Na základě výsledků testů kandidátů určí algoritmus hodnocení úroveň myšlení každé otázky podle procenta kandidátů, kteří na otázku odpoví správně. Podle tohoto principu budou otázky s malým počtem správných odpovědí otázkami s vysokou úrovní myšlení, otázky s mnoha správnými odpověďmi budou otázkami s nízkou úrovní myšlení.

Test TSA Thinking Assessment na Hanojské univerzitě vědy a technologie využívá k výpočtu skóre studentů teorii otázek a odpovědí. Při tomto výpočtu, ačkoli mají kandidáti stejné hrubé skóre, se na základě úrovně obtížnosti otázek, na které je každý kandidát schopen odpovědět, odhadne odpovídající úroveň schopností a toto skóre se poté převede na 100bodovou stupnici.

Bodovací stupnice bude vytvořena na základě výsledků testů kandidátů po každém testu. Na základě výsledků testů kandidátů určí bodovací algoritmus úroveň myšlení každé otázky podle procenta kandidátů, kteří na danou otázku odpoví správně. Podle principu budou otázky s malým počtem správných odpovědí otázky s vysokou úrovní myšlení, otázky s mnoha správnými odpověďmi budou otázky s nízkou úrovní myšlení. Bodovací stupnice je vytvořena podle principu, že otázky s vysokou úrovní myšlení budou hodnoceny vysoko v poměru k procentu kandidátů, kteří odpoví správně, otázky s nízkou úrovní myšlení budou hodnoceny nízko v poměru k procentu kandidátů, kteří odpoví správně.

Kromě toho, aby byla zajištěna spravedlivost mezi jednotlivými zkušebními obdobími, zkouška TSA Hanojské univerzity vědy a technologie používá mezi zkušebními testy také standardní „přemosťovací“ sadu otázek – známých také jako přemosťovací otázky nebo společné otázky – aby se indexy hodnocení zkoušky srovnaly. Tato technologie zajistí, že kandidáti v různých zkušebních obdobích budou hodnoceni na stejné společné stupnici, čímž se zajistí spravedlivost výsledků mezi jednotlivými zkušebními obdobími.

Během přijímacího řízení na univerzity v roce 2024 se testu TSA Thinking Assessment Hanojské univerzity vědy a techniky zúčastnilo téměř 50 000 uchazečů, celkem asi 21 000 z nich. Výsledky testu využilo více než 50 univerzit k řádnému přijímacímu řízení na univerzity. V roce 2025 se očekává, že testy Thinking Assessment proběhnou od ledna do dubna.

Zdroj: https://nhandan.vn/phuong-phap-cham-diem-cua-bai-thi-danh-gia-nang-luc-tsa-post845455.html