프로그래밍 과제 수행 중 발생한 컴파일러 오류와 런타임 오류를 측정하는 3가지 방식(오류 개수, Jadud의 오류 지수, 반복 오류 밀도)이 CS1 시험 성적을 설명하는 정도를 비교하였다. 오류 지수가 가장 잘 설명하였으며, 컴파일러 오류와 런타임 오류를 함께 고려할 때 설명력이 더 높아졌다.