LLM이 다듬은 글에서 사라지는 것들: 문체 균질화 연구

언어는 단순한 의사소통 수단이 아니다. 한 사람이 쓰는 문장에는 성별과 연령, 정치적 성향, 도덕적 가치관, 심리 상태 같은 정보가 함께 담긴다. 심리학, 마케팅, 의료 진단이 오랫동안 텍스트 분석에서 유용한 단서를 얻어온 이유다. 그런데 ChatGPT를 비롯한 대규모 언어모델(LLM)이 글쓰기 보조 도구로 빠르게 확산되면서, 이 단서들이 조용히 지워지고 있다는 연구가 나왔다. Sourati 등 연구진은 네이처 계열 저널에 발표한 논문에서, LLM 사용이 늘어난 이후 글쓰기의 다양성이 통계적으로 유의미하게 줄었다고 보고했다.

88만 건의 텍스트에서 확인된 균질화

연구진은 세 개의 연구, 서로 다른 영역에 걸친 일곱 개 데이터셋, 88만 건이 넘는 텍스트를 분석했다. 데이터의 출처는 폭이 넓다. 레딧의 창작 글쓰기 게시판(r/WritingPrompts), arXiv 논문 초록, 지역 뉴스 사이트 Patch의 기사, 미국 의회 회의록의 본회의 연설, 페이스북 게시물과 도덕성 설문 응답을 묶은 YourMorals 데이터, 공감 대화 데이터 등이다. 소셜미디어, 뉴스, 학술 글쓰기라는 성격이 전혀 다른 세 영역을 나란히 놓고 본 것이 이 연구의 강점이다.

핵심 결과는 ChatGPT 공개를 전후로 글쓰기 복잡도(writing complexity)의 분산이 뚜렷하게 떨어졌다는 것이다. 연구진은 여러 데이터셋과 여러 모델에 걸쳐 복잡도 분산이 21~50% 감소했으며, 이 결과가 통계적으로 유의미(P ≤ 0.05)했다고 밝혔다. 분산이 줄었다는 것은 글마다 달랐던 개성이 평균값 쪽으로 수렴했다는 뜻이다. 개인의 흔적이 옅어지고 균일함이 그 자리를 채운 셈이다. 이 경향은 특정 모델이나 특정 프롬프트에 국한되지 않고 다양한 LLM과 맥락에서 반복적으로 나타났다.

내용은 남고, 정체성의 단서는 사라진다

주목할 점은 LLM이 글을 다듬고 고쳐 쓸 때 핵심 내용 자체는 대체로 보존된다는 것이다. 문제는 문체다. 연구진은 LLM이 문장 스타일을 균질화하면서, 성별·연령·이념·도덕적 가치와 연결된 언어적 신호를 벗겨낸다고 지적한다. 더 구체적으로는 다수 집단에서 흔히 나타나는 특징적 패턴은 증폭되는 반면, 그 밖의 패턴은 억눌린다. 정제 과정이 단순히 글을 평평하게 만드는 데 그치지 않고, 지배적 문체를 표준으로 끌어올려 개성보다 순응을 강화하는 방향으로 작동한다는 것이다.

이런 편향은 LLM의 작동 원리를 생각하면 예상 밖의 일이 아니다. 모델은 방대한 텍스트에서 통계적으로 우세한 표현을 학습하고, 정렬(alignment) 과정에서 특정한 문체와 어조로 수렴하도록 조정된다. 그 결과 소수적 표현이나 지역적·문화적 특색은 다듬어야 할 거친 부분으로 취급되기 쉽다. 연구가 언급하는 문화 보존(cultural preservation)에 대한 우려는 이 지점에서 나온다. 편의를 위한 자동 교정이 누적되면, 특정한 방식의 글쓰기만 올바른 것으로 굳어질 수 있다.

실무자가 눈여겨봐야 할 지점

한국의 IT·데이터 실무자에게 이 결과는 몇 가지 구체적인 함의를 던진다. 첫째는 텍스트 기반 분석 파이프라인의 신뢰성 문제다. 저자 식별, 페르소나 추정, 사용자 세분화, 성향 분석처럼 문체 신호에 의존하는 모델은 입력 텍스트가 LLM으로 정제되는 순간 근거로 삼던 단서를 잃는다. 채용 과정의 서류 평가나 개인화 추천처럼 글에서 사람을 읽어내는 응용은 특히 취약하다. 둘째는 연구진이 진단 프로세스를 명시적으로 언급했다는 점이다. 우울·인지장애·정신질환의 언어적 표지를 찾는 연구들은 미세한 문체 변화에 기대는데, LLM 정제가 그 변화를 지워버리면 조기 선별의 정확도가 흔들릴 수 있다.

동시에 이 연구의 한계도 분명히 짚어야 한다. 관찰된 것은 상관관계이지 개별 저자가 실제로 LLM을 썼다는 직접 증거는 아니다. 글쓰기 복잡도의 분산이라는 지표는 다양성의 한 단면일 뿐이며, 어휘·주제·논증 구조 같은 다른 차원까지 균질화됐는지는 별도의 검증이 필요하다. 다만 연구진이 전처리부터 재작성, 분류기 학습, 통계 분석까지 전체 코드를 MIT 라이선스로 공개해 재현 가능성을 열어둔 점은 후속 검증에 도움이 될 것이다.

결국 이 연구가 던지는 질문은 도구를 쓸지 말지가 아니라 어디까지 맡길지에 관한 것이다. 초안의 문법을 손보는 일과 최종 원고를 통째로 다시 쓰게 하는 일은 성격이 다르다. 데이터를 다루는 쪽에서는 분석 대상 텍스트가 얼마나 기계적으로 정제됐는지를 메타데이터로 함께 관리하고, 문체 신호에 의존하는 모델일수록 그 전제가 여전히 유효한지 주기적으로 점검할 필요가 있다.