Metoda hodnocení pro test TSA Thinking Skills Assessment.

NDO - Pozoruhodným rysem metody hodnocení použité v TSA Thinking Assessment, kterou provádí Hanojská univerzita vědy a technologie, je to, že nepoužívá tradiční metody hodnocení, ale místo toho k výpočtu skóre kandidátů aplikuje teorii otázek a odpovědí, což umožňuje přesný a spolehlivý odhad schopností kandidátů.

Test Thinking Skills Assessment (TSA) na Hanojské univerzitě vědy a technologie si klade za cíl zhodnotit tři základní myšlenkové dovednosti studentů: matematické myšlení, myšlení s porozuměním čtenému textu a vědecké/problémové myšlení – to vše jsou klíčové prvky, které studentům umožňují vyniknout ve vysokoškolském vzdělávání .

Zkouška se tedy skládá ze tří částí: Matematické myšlení (60 minut), Čtení s porozuměním (30 minut) a Vědecké myšlení/řešení problémů (60 minut). Jedná se o tři nezávislé části a otázky zkoušky se zaměří na posouzení schopností myšlení kandidáta v každé části, nikoli na přímé testování znalostí konkrétního předmětu.

Zkouška TSA se skládá ze tří nezávislých částí (Matematické uvažování, Čtení s porozuměním a Vědecké uvažování/řešení problémů), které se zaměřují na posouzení schopností kandidátů, spíše než na přímé testování znalostí konkrétního předmětu.

Existuje několik pozoruhodných bodů týkajících se metodiky hodnocení testu TSA Competency Assessment Test.

Oddělení přijímacího řízení a kariérního poradenství Hanojské univerzity vědy a techniky uvedlo, že tradiční metoda hodnocení používá k určení konečných výsledků zkoušky hrubé skóre. Podle klasické teorie skládání testů je hrubé skóre zkoušky součtem skóre z jednotlivých otázek v dané zkoušce.

Například v testu se 100 otázkami získá student za každou správnou odpověď 1 bod. Pokud student správně odpoví na 70 otázek, získá 70 bodů. Toto skóre se nazývá hrubé skóre a používá se k určení konečného výsledku a jeho porovnání se skóre ostatních studentů.

Jednou z nevýhod používání hrubých skóre je, že je obtížné rozlišit schopnosti kandidátů se stejným hrubým skóre, pokud absolvují stejný test ve stejnou dobu. Navíc při výpočtu skóre schopností pomocí hrubých skóre se schopnosti kandidáta změní, pokud absolvuje dva testy s různou úrovní obtížnosti ve stejnou dobu. Například v jednom testu budou mít kandidáti, kteří správně odpoví na 70 otázek, stejné hrubé skóre 70 bodů.

Ve skutečnosti tito kandidáti mohli správně odpovědět na různé sady otázek a úroveň obtížnosti těchto otázek ve zkoušce se také liší, takže skóre 70 přesně neodráží schopnosti těchto kandidátů.

Aby se tento problém vyřešil, používají se v zemích po celém světě moderní teorie měření vzdělávacích schopností k přesnějšímu a spolehlivějšímu odhadu schopností kandidátů. Jednou z nich je aplikace teorie otázek a odpovědí. Tato teorie předpokládá, že každý kandidát odpoví na otázku v testu na určité úrovni schopností a že kandidáti s vysokými schopnostmi mají vyšší pravděpodobnost, že na jakoukoli danou otázku odpoví správně, než kandidáti s nízkými schopnostmi. Na základě této teorie lze kvantifikovat parametry, jako je obtížnost a rozlišovací schopnost otázek, a také schopnosti kandidátů, a tyto faktory jsou na sobě nezávislé.

To znamená, že parametry jsou specifické pro danou otázku, nezávislé na vzorku kandidátů, kteří na ni odpovídají, a naopak, schopnosti kandidátů jsou konstantní napříč všemi otázkami, na které odpovídají. Odhad schopností kandidátů bude proto spolehlivější než jejich výpočet pomocí hrubého skóre.

Na základě výsledků testů kandidátů určí algoritmus hodnocení požadovanou úroveň myšlení pro každou otázku podle procenta kandidátů, kteří otázku správně odpověděli. Princip spočívá v tom, že otázky s menším počtem správných odpovědí budou považovány za otázky s vysokou úrovní myšlení, zatímco otázky s větším počtem správných odpovědí budou považovány za otázky s nízkou úrovní myšlení.

Test TSA (Taktické hodnocení myšlení) na Hanojské univerzitě vědy a technologie využívá k výpočtu skóre studentů v testu TSA teorii otázek a odpovědí. U této metody se i v případě, že kandidáti mají stejné hrubé skóre, jejich odpovídající úroveň schopností se odhadne na základě obtížnosti otázek, na které odpověděli, a toto skóre se poté převede na 100bodovou stupnici.

Hodnotící rubrika bude stanovena po zpřístupnění výsledků testů jednotlivých kandidátů. Na základě výsledků testů kandidátů určí hodnotící algoritmus úroveň myšlení požadovanou pro každou otázku podle procenta kandidátů, kteří na danou otázku odpověděli správně. Princip spočívá v tom, že otázky s menším počtem správných odpovědí budou považovány za otázky s vysokou úrovní myšlení, zatímco otázky s větším počtem správných odpovědí budou považovány za otázky s nízkou úrovní myšlení. Hodnotící rubrika je vytvořena na základě principu, že otázky s vysokou úrovní myšlení získají vyšší skóre odpovídající procentu správných odpovědí a otázky s nízkou úrovní myšlení získají nižší skóre odpovídající procentu správných odpovědí.

Aby byla zajištěna spravedlnost mezi jednotlivými zkušebními obdobími, zkouška TSA na Hanojské univerzitě vědy a techniky používá mezi zkušebními testy standardizovanou sadu „přemosťovacích“ otázek – známou také jako přemosťovací otázky nebo společné otázky – aby se ukazatele hodnocení zkoušky sjednotily na jednotnou stupnici. Tato technologie zajišťuje, že kandidáti v různých zkušebních obdobích jsou hodnoceni na stejné stupnici, čímž je zaručena spravedlnost výsledků mezi jednotlivými zkušebními obdobími.

Během přijímacího řízení na univerzity v roce 2024 absolvovalo test TSA Thinking Skills Assessment na Hanojské univerzitě vědy a techniky téměř 50 000 účastníků, celkem přibližně 21 000 kandidátů. Výsledky tohoto testu byly použity více než 50 univerzitami pro jejich pravidelné přijímací řízení na bakalářské studium. V roce 2025 se očekává, že testy Thinking Skills Assessment proběhnou od ledna do dubna.

Zdroj: https://nhandan.vn/phuong-method-of-scoring-the-tsa-capacity-assessment-exam-post845455.html