핵심 개념
대형 언어 모델을 사용하여 MOOCs에서 피어 채점을 대체하는 가능성을 탐구하고 자동 채점 시스템에 대한 유망한 방향을 제시함.
초록
대형 언어 모델(Large Language Models, LLMs)을 MOOCs에서 피어 채점 대체로 사용 가능성 탐구
18가지 설정에서 GPT-4와 GPT-3.5를 사용하여 채점 능력 평가
Zero-shot-CoT 프롬프팅 기술을 활용하여 채점 방법 비교
GPT-4가 인스트럭터 제공 답변 및 루브릭과 함께 사용될 때 가장 우수한 결과 도출
역사와 철학의 천문학 과목은 채점이 어려운 것으로 나타남
통계
피어 채점 대체를 위해 대형 언어 모델(Large Language Models, LLMs) 활용
GPT-4와 GPT-3.5를 사용하여 18가지 설정에서 채점 능력 평가
인용구
"대형 언어 모델을 사용하여 MOOCs에서 피어 채점을 대체하는 가능성을 탐구하고 자동 채점 시스템에 대한 유망한 방향을 제시함."
"GPT-4가 인스트럭터 제공 답변 및 루브릭과 함께 사용될 때 가장 우수한 결과 도출"