Core Concepts
ChatGPT는 학술 논문 작성에 점점 더 큰 영향을 미치고 있으며, 특히 컴퓨터 과학 분야에서 그 영향이 두드러지고 있다.
Abstract
이 연구는 2018년 5월부터 2024년 1월까지 제출된 100만 개의 arXiv 논문을 분석하여 ChatGPT의 작문 스타일이 논문 초록에 미치는 영향을 평가했다.
주요 관찰 결과:
- 2023년 초부터 ChatGPT 스타일의 논문 초록이 급증하고 있으며, 특히 컴퓨터 과학 분야에서 그 비율이 약 35%에 달하는 것으로 추정된다.
- 일반적인 단어들의 사용 빈도가 크게 변화하고 있는데, 이는 ChatGPT의 영향으로 보인다. 예를 들어 "is"와 "are"의 사용 빈도가 10% 이상 감소했다.
- 시뮬레이션 데이터와 실제 데이터 분석을 통해 ChatGPT의 영향을 정량적으로 추정할 수 있었다. 이를 통해 ChatGPT가 학술 논문 작성에 미치는 긍정적 및 부정적 측면을 분석했다.
Stats
2023년 초 이후 "is"와 "are"의 사용 빈도가 컴퓨터 과학 논문 초록에서 각각 14%, 17% 감소했다.
컴퓨터 과학 논문 초록에서 "significant"의 사용 빈도가 2022년 대비 2023년에 99% 증가했다.
수학 논문 초록에서 "significant"의 사용 빈도가 2022년 대비 2023년에 308% 증가했다.
Quotes
"ChatGPT는 학술 논문 작성에 점점 더 큰 영향을 미치고 있으며, 특히 컴퓨터 과학 분야에서 그 영향이 두드러지고 있다."
"2023년 초부터 ChatGPT 스타일의 논문 초록이 급증하고 있으며, 특히 컴퓨터 과학 분야에서 그 비율이 약 35%에 달하는 것으로 추정된다."