מדוע מועמדים רבים מגלים שציוני הערכת החשיבה של TSA אינם כמצופה?

השנה היא השנה השנייה שאוניברסיטת המדע והטכנולוגיה של האנוי ארגנה את בחינת ההערכה החשיבה של TSA בצורה חדשה, כלומר מבנה הבחינה הותאם בהשוואה לשנת 2022 ומוקדם יותר. בפרט, בנוסף להתאמת מבנה הבחינה, אוניברסיטת המדע והטכנולוגיה של האנוי יישמה תיאוריית הערכה חדשה, שהיא תיאוריית השאלות והתגובות (IRT), בהערכת איכות השאלות וכן בחישוב ציוני הבחינה עבור המועמדים.

דבר זה גרם לכך שהמועמדים לא יוכלו לתת ציון לעצמם לאחר סיום המבחן, אלא נאלצו להמתין לתוצאות הציון מניתוח נתוני המבחן של המועמד. לכן, לאחר קבלת הודעת התוצאות, מועמדים רבים מבולבלים משום שהציונים שהתקבלו אינם כפי שדמיינו.

סטודנטים רבים מתעניינים מאוד במבחן הערכת החשיבה של TSA שאורגן על ידי אוניברסיטת המדע והטכנולוגיה של האנוי.

ציוני מבחנים הם מודל כמותי של הערכת יכולותיו של המועמד.

כדי להפיג את הדאגה הזו בקרב המועמדים, עיתון Thanh Nien ערך ראיון עם ד"ר דאנג שואן קואנג, מדען עצמאי בעל שנות מחקר ויישום רבות של הערכה ומדידה חינוכיים , אחד האנשים שייעצו לאוניברסיטת המדע והטכנולוגיה של האנוי כדי ליישם את מבחן הערכת החשיבה של TSA בשנתיים האחרונות.

לדברי ד"ר דאנג שואן קואנג, תיאוריית התגובה לשאלות בנויה על מודלים מתמטיים כדי להסביר את הקשר בין יכולתו של המועמד לבין השאלות המודדות יכולת זו. בגישה תיאורטית זו, הפרמטרים של השאלות (כגון קושי, הבחנה, ניחוש וכו') ויכולתו של המועמד יכומו על סמך נתוני המבחן של קבוצת המועמדים המשתתפים במבחן. לכן, יכולתו של המועמד המוערכת מתורת התגובה לשאלות תהיה שונה משיטת הניקוד המסורתית.

המועמדים נבחנים לפני שניגשים למבחן הערכת החשיבה של ה-TSA.

בדירוג המסורתי, ציון המבחן הוא פשוט חיבור מכני של ציוני השאלות במבחן בהתאם למדריך דירוג ספציפי. מומחים מכנים זאת "ציון גולמי". עם הציון הגולמי, רוב המועמדים יכולים להסתמך על התשובות כדי לתת ציון למבחן שלהם, וגם אם המבחן מורכב רק משאלות רב-ברירה אובייקטיביות, המועמדים יכולים לתת ציון לעצמם לאחר ביצוע המבחן.

בגישת תורת התשובות לשאלות, ציון המבחן הוא תוצאה המוכרזת למועמד לאחר תהליך של ניתוח נתוני המבחן שלו. זהו שלב מורכב למדי מבחינת מומחיות, המבוצע באמצעות תוכנה ייעודית ונבחן בקפידה באמצעות אינדיקטורים סטטיסטיים. למעשה, ציון המבחן הוא תוצאה כמותית, המשמשת כבסיס המסייע למועמדים להכיר את יכולתם וכן בסיס להשוואת תוצאות המבחן שלהם עם תוצאות כל המועמדים האחרים בבחינה.

ד"ר דאנג שואן קואנג הסביר: "בעיקרון, לאחר שהמועמדים יסיימו את המבחן, המערכת תסתמך על הנתונים של כל שאלה במבחן כדי להעריך את יכולתם של המועמדים, כולל מידע על מספר המועמדים שיכולים לענות על כל שאלה מתאימה ואילו מועמדים הם, כמה שאלות כל מועמד יכול לענות עליהן ואילו שאלות הם."

נתוני תוצאות המבחן של הנבחן יסייעו למערכת ליצור מודל להערכת יכולתו. מיכולת משוערת זו, יחושב ציון הערכת החשיבה על ידי המרתו לסולם בו משתמש המבחן (בדרך כלל מ-0 עד 100).

אפילו אם תענו נכון על 70 שאלות, ציוני המבחן שלכם עשויים להיות שונים.

ד"ר דאנג שואן קואנג אמר גם כי מבחן הערכת החשיבה הנוכחי של אוניברסיטת המדע והטכנולוגיה של האנוי הוא מבחן המשלב יישום של מודל תגובה לשאלות בעל פרמטר יחיד (הנוגע רק לקושי של השאלה) ושני פרמטרים (הנוגעים לקושי ולאבחנה של השאלה). על פי העיקרון שצוין לעיל, לקבוצת מועמדים יש את אותו ציון גולמי אך ציוני מבחן ה-TSA של הסטודנטים שונים.

ד"ר דאנג שואן קואנג נתן דוגמה: "נניח שבמבחן יש 100 שאלות. לפי הגישה המסורתית, כל תשובה נכונה שווה נקודה אחת. אז, אם 2 מועמדים יכולים לענות על 70 שאלות יחד, כל מועמד יקבל 70 נקודות. עם זאת, בגישת תורת התשובות לשאלות, לכל שאלה במבחן תהיה רמת קושי שונה ויכולתו של המועמד תוערך על סמך השאלות הספציפיות שהמועמד ענה עליהן נכון. ועם 2 המועמדים שהוזכרו כאן, אם מועמד א' יכול לענות על שאלות קשות יותר ממועמד ב', היכולת המשוערת של מועמד א' תהיה גבוהה יותר מזו של מועמד ב'. בנוסף, גם הבדל השאלות הוא גורם המשמש להערכת יכולתם של המועמדים. מכאן, התוצאה היא שהציון המוכרז של תלמיד א' גבוה יותר מזה של תלמיד ב'."

במילים פשוטות יותר, בגישה המסורתית המבוססת על ציונים גולמיים, ציוני השאלות מחושבים עם אותו "משקל", כלומר הקושי והקלות של שאלות אלו אינן מחושבות. עבור תורת התשובות לשאלות, לציוני השאלות יהיו "משקלים" שונים, אולם משקל זה אינו נובע מרצונו הסובייקטיבי של מתכנן המבחן אלא מחושב על סמך מודלים מתמטיים מנתוני המבחן של המועמדים.

בתהליך יישום תורת התשובות לשאלות, ניתוח נתוני המבחן משתמש גם בטכניקת ההשוואה כדי להביא את ציוני המבחן של המועמדים לאותו סולם משותף. בכל שנה, למבחן הערכת החשיבה יש סבבים רבים, והמועמדים מקבלים הודעה על התוצאות זמן קצר לאחר ביצוע המבחן (לא מחכים לקיום המבחן השנתי).

כדי להבטיח הוגנות בתהליך הקבלה בין המועמדים הניגשים לבחינה בסבבים שונים, מארגן הבחינה ישתמש בסולם הבחינות של הסיבוב הראשון כסולם המקורי. בסבבים הבאים, במהלך ניתוח תוצאות הבחינה, מיושמת טכניקת השוואה כדי להחזיר את ציוני המועמדים הניגשים לסיבוב הבא לסולם המקורי, ולאחר מכן להציג את התוצאות הרשמיות של המועמדים. זה יעזור להשוות את תוצאות הבחינה בין הסבבים ביתר קלות.

לדברי ד"ר דאנג שואן צ'ונג, לכל תיאוריה יש יתרונות וחסרונות. "עם יישום תיאוריית מענה לשאלות באוניברסיטת המדע והטכנולוגיה של האנוי לבחינת הערכת החשיבה, אנו גם מקפידים מאוד, באמצעות מפת דרכים ספציפית לשכלול הבחינה בכל שנה", אמר מר צ'ונג.

ד"ר דאנג שואן קואנג קיבל את הדוקטורט שלו בחינוך עם תזה בנושא מדידה והערכה חינוכית מאוניברסיטת פלינדרס, אוסטרליה. יש לו למעלה מ-18 שנות ניסיון בתחום זה.

מקור: https://thanhnien.vn/vi-sao-nhieu-thi-sinh-thay-diem-thi-danh-gia-tu-duy-tsa-khong-nhu-ky-vong-185240525095542657.htm