Метод оцінювання за програмою TSA Thinking Assessment

NDO – Примітним моментом методу оцінювання TSA Thinking Assessment Ханойського університету науки і технологій є те, що він не використовує традиційний метод оцінювання, а застосовує теорію відповідей на запитання для розрахунку балу кандидата, щоб мати змогу точно та надійно оцінити здібності кандидата.

Тест на оцінку навичок мислення (TSA) Ханойського університету науки і технологій має на меті оцінити три основні розумові здібності студентів, зокрема: математичне мислення, розуміння прочитаного та наукове мислення/розв'язання проблем – важливі фактори, які допомагають студентам найкраще навчатися в університетському освітньому середовищі.

Відповідно, тест складається з 3 частин: Математичне мислення (60 хвилин), Розуміння прочитаного (30 хвилин) та Наукове мислення/Розв'язання задач (60 хвилин). Це 3 незалежні частини, тестові питання будуть зосереджені на оцінці здібностей кандидата до мислення в кожній частині, а не безпосередньо на перевірці знань з будь-якого предмета.

Іспит TSA складається з трьох незалежних розділів (математичне мислення, розуміння прочитаного, наукове мислення/вирішення проблем), які зосереджені на оцінці здібностей кандидатів без безпосередньої перевірки знань з будь-якого предмета.

Варто зазначити кілька моментів щодо методу оцінювання тесту на придатність TSA.

Відділ приймальної комісії та професійної орієнтації Ханойського університету науки і технологій повідомив, що традиційним методом оцінювання є використання «сирих» балів для оцінювання підсумкового іспиту. Згідно з класичною теорією множинного вибору, «сирий» бал іспиту дорівнює сумі балів за питання на цьому іспиті.

Наприклад, у тесті зі 100 питань кожна правильна відповідь принесе кандидату 1 бал. Якщо кандидат правильно відповість на 70 питань, він/вона отримає 70 балів. Цей бал називається «сирим» балом і використовується для оцінки результатів, а також для порівняння з балами інших кандидатів.

Одним із недоліків використання необроблених балів є те, що важко розрізнити здібності кандидатів з однаковим необробленим балом, коли вони складають один і той самий тест одночасно. Крім того, під час розрахунку балів здібностей за допомогою необроблених балів, здібності кандидатів змінюватимуться, якщо вони складатимуть два тести різної складності одночасно. Наприклад, під час тестування кандидати, які правильно відповіли на 70 запитань, матимуть однаковий необроблений бал – 70 балів.

Насправді, ці кандидати могли правильно відповісти на різні набори запитань, і складність цих запитань на іспиті також варіюється, тому бал 70 неточно відображає здібності цих кандидатів.

Щоб вирішити цю проблему, основні іспити по всьому світу застосовують сучасні теорії вимірювання освіти для точнішої та надійнішої оцінки здібностей кандидатів. Однією з них є застосування теорії питань та відповідей. Ця теорія передбачає, що кожен кандидат відповідає на запитання в тесті з певним рівнем здібностей, і що кандидати з високими здібностями матимуть вищу ймовірність правильно відповісти на будь-яке запитання, ніж кандидати з низькими здібностями. Ґрунтуючись на цій теорії, такі параметри, як складність та дискримінація питань, а також здібності кандидатів, можна кількісно визначити, і ці фактори не залежать один від одного.

Це означає, що параметри є специфічними для питання, незалежними від вибірки кандидатів, які відповідають на це питання, і навпаки, здібності кандидата не залежать від питань, на які він відповідає. Тому оцінка здібностей кандидата буде надійнішою, ніж метод первинної оцінки.

На основі результатів тестування кандидатів, алгоритм оцінювання визначатиме рівень мислення кожного питання відповідно до відсотка кандидатів, які правильно відповіли на питання. Згідно з принципом, питання з невеликою кількістю правильних відповідей будуть питаннями з високим рівнем мислення, питання з великою кількістю правильних відповідей - питаннями з низьким рівнем мислення.

Тест на оцінювання мислення TSA Ханойського університету науки і технологій використовує теорію відповідей на запитання для розрахунку балів студентів TSA. За цим розрахунком, хоча кандидати мають однаковий первинний бал, на основі рівня складності питань, на які кожен кандидат може відповісти, буде оцінено відповідний рівень здібностей, а потім цей бал буде перетворено на 100-бальну шкалу.

Шкала оцінювання буде сформована після результатів тестування кандидатів після кожного тестування. На основі результатів тестування кандидатів алгоритм оцінювання визначатиме рівень мислення кожного питання відповідно до відсотка кандидатів, які правильно відповіли на це питання. Згідно з принципом, питання з невеликою кількістю правильних відповідей будуть питаннями з високим рівнем мислення, питання з великою кількістю правильних відповідей - питаннями з низьким рівнем мислення. Шкала оцінювання формується за принципом, що питання з високим рівнем мислення будуть оцінені високо пропорційно відсотку кандидатів, які правильно відповіли, питання з низьким рівнем мислення будуть оцінені низько пропорційно відсотку кандидатів, які правильно відповіли.

Крім того, для забезпечення справедливості між екзаменаційними сесіями, іспит TSA Ханойського університету науки і технологій також застосовує стандартний "містковий" набір питань, також відомий як місткові питання, загальні питання, між екзаменаційними роботами, щоб привести оціночні показники до однакової шкали. Ця технологія гарантуватиме, що кандидати в різних екзаменаційних сесіях будуть оцінюватися за однією спільною шкалою, тим самим забезпечуючи справедливість результатів між екзаменаційними сесіями.

Протягом вступного сезону до університетів 2024 року майже 50 000 разів, загалом близько 21 000 кандидатів взяли участь у тесті TSA Thinking Assessment Ханойського університету науки і технологій. Результати тесту були використані понад 50 університетами для регулярної вступної роботи до університетів. Очікується, що у 2025 році тести Thinking Assessment будуть проводитися з січня по квітень.

Джерело: https://nhandan.vn/phuong-phap-cham-diem-cua-bai-thi-danh-gia-nang-luc-tsa-post845455.html