Neden birçok aday TSA düşünme değerlendirme puanlarının beklendiği gibi olmadığını düşünüyor?

Bu yıl, Hanoi Bilim ve Teknoloji Üniversitesi'nin TSA düşünme değerlendirme sınavını yeni bir şekilde düzenlediği ikinci yıl. Bu, sınav yapısının 2022 ve öncesine göre ayarlandığı anlamına geliyor. Özellikle, sınav yapısını düzenlemenin yanı sıra, Hanoi Bilim ve Teknoloji Üniversitesi, soruların kalitesini değerlendirmede ve adayların sınav puanlarını hesaplamada yeni bir değerlendirme teorisi olan Soru-Cevap Teorisi'ni (IRT) uyguladı.

Bu durum, adayların sınavı tamamladıktan sonra kendilerini puanlayamamalarına ve adayların test verilerinin analizinden elde edilen puanlama sonuçlarını beklemek zorunda kalmalarına neden oldu. Bu nedenle, sonuç bildirimini aldıktan sonra birçok aday, aldıkları puanların hayal ettikleri gibi olmaması nedeniyle kafa karışıklığı yaşıyor.

Hanoi Bilim ve Teknoloji Üniversitesi tarafından düzenlenen TSA düşünme değerlendirme sınavına çok sayıda öğrenci ilgi gösteriyor.

Test puanları adayın yetenek tahmininin niceliksel bir modelidir.

Adayların bu endişesini gidermek için Thanh Nien Gazetesi, eğitim değerlendirmesi ve ölçümü konusunda uzun yıllar araştırma ve uygulama deneyimi olan bağımsız bilim insanı Dr. Dang Xuan Cuong ile bir röportaj yaptı. Cuong, Hanoi Bilim ve Teknoloji Üniversitesi'nin son 2 yıldır TSA düşünme değerlendirme testini uygulamasında danışmanlık yapan kişilerden biriydi.

Dr. Dang Xuan Cuong'a göre, soru-cevap teorisi, adayın yeteneği ile bu yeteneği ölçen sorular arasındaki ilişkiyi açıklamak için matematiksel modeller üzerine kuruludur. Bu teorik yaklaşımla, soruların parametreleri (zorluk, ayırt edicilik, tahmin yeteneği vb.) ve adayın yeteneği, teste katılan aday grubunun test verilerine dayanarak ölçülecektir. Bu nedenle, adayın soru-cevap teorisine göre tahmin edilen yeteneği, geleneksel puanlama yönteminden farklı olacaktır.

Adaylar TSA düşünme değerlendirme testine girmeden önce teste tabi tutulurlar.

Geleneksel notlandırmada, sınav puanı, belirli bir notlandırma kılavuzuna göre testteki soruların puanlarının mekanik olarak eklenmesiyle elde edilir. Uzmanlar buna ham puan adını verir. Ham puanla, çoğu aday kendi sınavını puanlamak için cevaplara güvenebilir ve sınav yalnızca nesnel çoktan seçmeli sorulardan oluşsa bile, adaylar sınavı geçtikten sonra kendi puanlarını verebilirler.

Soru-cevap kuramı yaklaşımında, sınav puanı, adayın sınav verilerinin analiz edilmesinin ardından adaya açıklanan bir sonuçtur. Bu, uzmanlık gerektiren oldukça karmaşık bir adımdır ve özel yazılımlar aracılığıyla gerçekleştirilir ve istatistiksel göstergeler aracılığıyla dikkatlice değerlendirilir. Özünde, sınav puanı nicel bir sonuçtur ve adayların yeteneklerini anlamalarına ve sınav sonuçlarını sınavdaki diğer tüm adayların sonuçlarıyla karşılaştırmalarına yardımcı olur.

Dr. Dang Xuan Cuong şöyle açıklıyor: "Prensip olarak, adaylar testi tamamladıktan sonra sistem, adayların yeteneklerini tahmin etmek için testteki her sorunun verilerine dayanacak. Bu tahminler, her bir soruya kaç adayın cevap verebileceği, bunların hangi adaylar olduğu, her adayın kaç soru cevaplayabileceği ve hangi sorular olduğu gibi bilgileri de içerecek."

Sınava giren kişinin sınav sonucu verileri, sistemin sınava giren kişinin yeteneğini tahmin etmek için bir model oluşturmasına yardımcı olacaktır. Bu tahmini yetenek, testte kullanılan ölçeğe (genellikle 0 ile 100 arasında) dönüştürülerek düşünme değerlendirme puanı hesaplanacaktır.

70 soruyu doğru yapsanız bile sınav puanlarınız farklı olabilir.

Dr. Dang Xuan Cuong ayrıca, Hanoi Bilim ve Teknoloji Üniversitesi'nin mevcut TSA düşünme değerlendirme testinin, tek parametreli bir soru yanıt modelinin (yalnızca sorunun zorluğuyla ilgilenir) ve iki parametreli (sorunun zorluğu ve ayırt ediciliğiyle ilgilenir) uygulamasını birleştiren bir sınav olduğunu belirtti. Yukarıda belirtilen ilkeye göre, bir grup adayın ham puanı aynı, ancak öğrencilerin TSA sınav puanları farklıdır.

Dr. Dang Xuan Cuong bir örnek verdi: "Sınavda 100 soru olduğunu varsayalım. Geleneksel yaklaşıma göre, her doğru cevap 1 puan değerindedir. İki aday birlikte 70 soru çözebilirse, her aday 70 puan alır. Ancak, soru-cevap teorisi yaklaşımında, testteki her soru farklı bir zorluk seviyesine sahip olacak ve adayın yeteneği, hangi soruları doğru cevapladığına göre tahmin edilecektir. Burada bahsedilen iki aday için ise, A adayı B adayından daha zor soruları çözebilirse, A adayının tahmini yeteneği B adayınınkinden daha yüksek olacaktır. Ayrıca, soruların farklılığı da adayların yeteneğini tahmin etmede kullanılan bir faktördür. Buradan çıkan sonuç, A öğrencisinin açıklanan puanının B öğrencisininkinden daha yüksek olmasıdır."

Daha basit bir ifadeyle, ham puanlara dayanan geleneksel yaklaşımda, soruların puanları aynı "ağırlık" ile hesaplanır; yani bu soruların zorluk ve kolaylık düzeyleri hesaplanmaz. Soru-cevap teorisinde ise, soruların puanları farklı "ağırlıklara" sahip olacaktır; ancak bu ağırlık, test tasarımcısının öznel iradesinden değil, adayların test verilerinden elde edilen matematiksel modellerden kaynaklanmaktadır.

Soru-cevap teorisinin uygulanması sürecinde, test verilerinin analizi, adayların test puanlarını aynı ortak ölçeğe getirmek için karşılaştırma tekniğini de kullanır. Her yıl, düşünme değerlendirme testi birçok turdan oluşur ve adaylara testten kısa bir süre sonra (yıllık testin yapılmasını beklemeden) sonuçlar bildirilir.

Sınava farklı turlarda giren adaylar arasında kabul sürecinde adaleti sağlamak için, sınav düzenleyicisi ilk tur ölçeğini orijinal ölçek olarak kullanacaktır. Sonraki turlarda, sınav sonuçlarının analizi sırasında, bir sonraki tura giren adayların puanlarını orijinal ölçeğe getirmek ve ardından adayların resmi sonuçlarını vermek için karşılaştırma tekniği uygulanacaktır. Bu, turlar arasında sınav sonuçlarının daha kolay karşılaştırılmasına yardımcı olacaktır.

Dr. Dang Xuan Cuong'a göre, her teorinin kendine özgü avantajları ve dezavantajları var. "Hanoi Bilim ve Teknoloji Üniversitesi'nde düşünme değerlendirme sınavında soru-cevap teorisini uygularken, her yıl sınavı mükemmelleştirmek için belirli bir yol haritası üzerinden çok dikkatli davranıyoruz," dedi Bay Cuong.

Dr. Dang Xuan Cuong, Avustralya'daki Flinders Üniversitesi'nden eğitim ölçme ve değerlendirme üzerine hazırladığı teziyle eğitim alanında doktora derecesini almıştır. Bu alanda 18 yılı aşkın deneyime sahiptir.

Kaynak: https://thanhnien.vn/vi-sao-nhieu-thi-sinh-thay-diem-thi-danh-gia-tu-duy-tsa-khong-nhu-ky-vong-185240525095542657.htm