3월 24일, 하노이 과학기술대학교는 사고력 평가 시험(TSA) 2차 시험 결과를 발표했습니다. 대학 측은 점수 산정 방식에 대한 많은 질문을 받았습니다.
학교 측에 따르면, 이번 시험에 응시한 2만 명이 넘는 학생들의 점수 분포는 평균 55.44/100점으로 정규 분포를 따른다. 최고 득점자는 하이퐁 시 빈바오 고등학교의 응우옌 뚜안 닷 학생으로, 98.98점을 획득하여 시험 6년 역사상 최고 점수를 기록했다.
공개된 결과에 따르면, 투안 닷은 수학적 추론 영역에서 40문항 모두 정답을, 독해 영역에서 20문항 중 18문항을, 과학적 추론/문제 해결 영역에서 40문항 중 33문항을 맞혔습니다. 따라서 투안 닷은 9문항을 틀려 1.02점의 감점을 받았습니다.
하지만 결과 발표 후, 채점 방식에 대한 많은 의문이 여러 포럼에서 제기되었습니다.
또한, 일각에서는 그를 지난 1월 첫 번째 TSA 시험에서 100문항 중 92문항을 맞춘 최고 득점자와 비교하기도 했습니다. 이는 정답 수는 더 많지만, 총점은 투안 닷보다 2.88점 낮았다는 것을 의미합니다.
이 질문에 대해 하노이 과학기술대학교 입학 및 진로지도 책임자인 부교수 부 두이 하이는 "TSA 시험은 오늘날 베트남의 대부분 시험처럼 원점수 방식을 사용하지 않습니다."라고 설명했습니다.
한편, 부교수 부 두이 하이 박사에 따르면 시험은 일반적으로 시험지에 있는 문제들의 총점을 계산합니다. 예를 들어, 시험에 100문제가 있고 각 문제가 1점씩이라면, 응시자가 70문제를 맞혔을 경우 70점을 받게 됩니다.
하지만 하노이 과학기술대학교는 동일한 원점수(예: 모두 70점)를 받은 응시자들의 능력을 구분하기 어렵고, 시험의 평균 난이도가 다를 경우 응시자들의 역량을 정확하게 평가할 수 없기 때문에 이러한 계산 방식을 사용하지 않습니다.
부교수 부 두이 하이 (하노이 과학기술대학교 입학 및 진로지도학과 학과장)
전 세계적으로 이러한 문제를 해결하기 위해 SAT, ACT와 같은 대규모 시험에서는 응시자의 능력을 정확하고 신뢰할 수 있게 측정하기 위해 현대 측정 이론을 활용해 왔습니다. 그중 하나가 문항 반응 이론(IRT)입니다.
이 이론은 각 수험자가 시험 문제를 풀 때 일정한 수준의 능력을 가지고 있다는 가설에 기반합니다. 능력이 뛰어난 수험자는 능력이 부족한 수험자에 비해 주어진 문제를 맞힐 확률이 더 높습니다. 이를 바탕으로 학교는 문제의 난이도와 변별력, 그리고 수험자의 능력과 관련된 여러 변수를 정량화할 수 있습니다.
하노이 과학기술대학교는 TSA 시험에 두 가지 매개변수(난이도와 변별도)를 사용하는 IRT 이론을 적용했습니다. 정답을 맞춘 사람이 적을수록 해당 문제는 어렵다고 간주하고, 정답을 맞춘 사람이 많을수록 쉽다고 간주합니다.
"이 모델에서는 응시자가 어려운 문제를 더 많이 맞힐수록 TSA 점수가 높아집니다. 반대로 쉬운 문제만 맞추면 TSA 점수가 낮아집니다. 따라서 같은 수의 문제를 맞혔더라도 응시자마다 TSA 점수가 다르게 나올 수 있습니다."라고 부교수 부 두이 하이(Vu Duy Hai) 박사는 설명했습니다.
TSA는 단순히 정답 개수만을 기준으로 점수를 매기는 것이 아니라, 각 문제의 난이도와 변별력을 바탕으로 응시자의 능력을 평가합니다.
시험 전반에 걸쳐 정확성과 공정성을 보장하기 위해, 부교수 Vu Duy Hai는 대학에서 다단계 채점 알고리즘을 적용하여 이전에 공유된 시험 데이터를 처리하고 매개변수를 추정한 후 각 응시자의 TSA 점수를 계산한다고 밝혔습니다.
학교 측에 따르면 TSA에서 2-매개변수 IRT 점수를 매기는 네 단계는 다음과 같습니다.
1단계: 채점 소프트웨어는 각 시험 회차의 모든 응시자 시험 결과를 바탕으로 현재 시험의 각 문항의 난이도와 변별도를 추정합니다.
2단계: 채점 소프트웨어는 응시자의 시험 결과와 현재 시험의 채점 척도를 기반으로 각 응시자의 사고력 점수를 추정합니다.
3단계: 응시자들의 사고력 점수를 단일 척도로 맞추기 위해 현재 시험의 척도를 이전 시험에서 사용된 공통 참조 척도로 변환합니다.
4단계: 지원자가 제시한 사고력 점수를 TSA 척도로 변환합니다.
따라서 위에서 설명한 2매개변수 IRT 채점 방식을 사용하면 TSA 점수는 응시자가 맞춘 답의 개수뿐만 아니라 시험에 대한 응시자의 전반적인 성적을 바탕으로 결정됩니다.
"이것이 바로 1차 시험 최고 득점자가 2차 시험 최고 득점자보다 문제를 하나 더 많이 풀었음에도 불구하고 총점이 더 낮았던 이유입니다."라고 두이 하이 씨는 설명했습니다.
출처: https://phunuvietnam.vn/ly-do-sai-9-cau-thu-khoa-tsa-van-dat-9898-100-diem-238260325163457583.htm
댓글 (0)