Core Concepts
LLMs의 사용이 저자의 언어적 특성 표지에 대한 예측력을 다소 감소시키지만, 이러한 감소는 드물게 발생하며 저자의 언어적 특성 표지에 대한 예측력을 완전히 감소시키지는 않는다.
Abstract
이 연구는 LLMs가 저자의 언어적 특성 표지에 미치는 영향을 조사했다. 저자의 성별, 나이, 정치적 성향, 성격, 공감 능력, 도덕성과 같은 6가지 개인적 특성을 대상으로 했다.
데이터 기반 분석 결과, LLMs의 사용이 저자의 언어적 특성 표지에 대한 예측력을 다소 감소시키는 것으로 나타났다. 그러나 이러한 감소는 모든 경우에 일어나는 것은 아니며, 대부분의 경우 예측력이 유지되었다. 특히 성별, 나이, 정치적 성향 예측에서 LLMs의 영향이 더 크게 나타났다.
이론 기반 분석에서는 LLMs가 일부 언어적 표지를 변화시켜 저자의 특성 예측에 영향을 미치는 것으로 나타났다. 예를 들어 외향성과 사회적 단어 사용의 관계, 공정성과 종교 단어 사용의 관계 등이 LLMs에 의해 변화되었다. 이는 LLMs 시대에 특정 언어적 표지의 신뢰성이 낮아질 수 있음을 시사한다.
전반적으로 이 연구는 LLMs가 저자의 개인적 특성 예측에 미치는 영향을 보여주며, 이러한 영향이 개인적 특성의 종류와 LLMs의 선택, 프롬프트 등에 따라 달라질 수 있음을 확인했다. 이는 LLMs 시대의 언어적 특성 연구에 중요한 시사점을 제공한다.
Stats
LLMs의 사용이 저자의 언어적 특성 표지에 대한 예측력을 약 6% 감소시켰다.
성별, 나이, 정치적 성향 예측에서 LLMs의 영향이 더 크게 나타났다.
공정성과 종교 단어 사용의 관계, 외향성과 사회적 단어 사용의 관계 등 일부 언어적 표지가 LLMs에 의해 변화되었다.
Quotes
"LLMs의 사용이 저자의 언어적 특성 표지에 대한 예측력을 다소 감소시키지만, 이러한 감소는 드물게 발생하며 저자의 언어적 특성 표지에 대한 예측력을 완전히 감소시키지는 않는다."
"LLMs가 일부 언어적 표지를 변화시켜 저자의 특성 예측에 영향을 미치는 것으로 나타났다. 이는 LLMs 시대에 특정 언어적 표지의 신뢰성이 낮아질 수 있음을 시사한다."