핵심 개념
PLM 기반 대리 모델을 사용하여 MC Cloze 테스트의 난이도를 효과적으로 제어하는 방법을 제안합니다.
초록
적응형 테스트에서 아이템 난이도의 중요성
MC Cloze 테스트의 읽기 이해력 및 언어 능력 평가
PLM을 사용한 IRT 평가 프레임워크 제안
난이도 조절 전략과 방법론 소개
실험 결과를 통해 제안된 프레임워크와 방법이 효과적으로 MC Cloze 테스트의 난이도를 제어하고 평가하는 것을 입증
통계
아이템 난이도를 추정하는 심리측정 프레임워크인 IRT
12개의 PLM 모델을 훈련하고 성능을 평가한 결과
난이도 조절 전략에 따라 생성된 난이도가 다른 예시 문항
인용구
"Item difficulty plays a crucial role in adaptive testing."
"We propose a PLM-based IRT assessment framework for objectively evaluating difficulty changes at the item level."
"Validity rules reduce but do not eliminate invalid distractors -- further study into this challenge is desired."