ChatGPT나 Claude에게 글쓰기를 맡겨 본 사람은 한 번쯤 이런 경험을 했을 것입니다. 분명히 결과물은 깔끔하고 자신감 넘치는 톤인데, 다시 읽어 보면 어딘가 비어 있다는 느낌. 아이오와 주립대 연구진이 이 현상에 ‘fluency trap’(유창함의 함정)이라는 이름을 붙였습니다. 학부생 38명을 두 학기 동안 따라가며 정리한 결과입니다.

핵심 요약

  • 학술지 Computers and Composition에 실린 새 연구가 AI 글쓰기 도구의 ‘fluency trap’(유창함의 함정) 현상을 정식으로 짚었습니다.
  • 아이오와 주립대 영문학과 Abram Anders 부교수와 Embry-Riddle 항공우주대 Emily Dux Speltz 조교수가 학부생 38명을 두 학기 동안 ‘AI와 글쓰기’ 실험 강의에서 추적했습니다.
  • AI는 자신감 있고 잘 다듬어진 문장을 뱉습니다. 그래서 내용이 얕거나 틀려도, 글쓴이는 일단 그 매끄러움을 믿어 버립니다.
  • 학생들은 처음엔 AI를 검색엔진처럼 다뤘지만, 시간이 지나면서 결국 좋은 글쓰기에 필요한 기획·명료함·수사 감각이 다시 필요해진다는 사실을 배웠습니다.
  • Anders 교수의 말: “AI는 글쓰기 워크플로를 바꿉니다. 그런데 글쓰기가 곧 사고라는 사실은 바꾸지 못합니다.”

아이오와 주립대 ‘AI와 글쓰기’ 강의 — Anders 교수와 학생들 Christopher Gannon / Iowa State University

‘fluency trap’: 매끄러운 문장이 만든 착각

연구가 짚은 핵심은 단순합니다. AI는 톤이 좋습니다. 문장이 매끈하고, 단어 선택은 적당히 격식 있고, 결론도 깔끔하게 떨어집니다. 글쓴이는 이 ‘폴리시’에 속아 자기 글이 다 됐다고 착각합니다. 정작 그 안에 든 주장이 얕은지, 사실관계가 맞는지, 핵심을 비껴간 건 아닌지는 따로 검증되지 않은 채로요.

Anders 교수는 이렇게 말합니다.

“AI는 자신감 있는 문장으로 적절한 톤을 쓰고, 똑똑한 듯한 인상을 줍니다. 그런데 그 매끄러움이 학생들을 속입니다. 내용이 틀렸거나 얕거나, 아예 핵심을 놓쳤을 때조차 ‘괜찮은 글’이라고 믿게 만듭니다.”

쉽게 말하면, ‘fluent’(유창)와 ‘finished’(완성)는 다른 단어인데 AI 글쓰기에서는 이 둘이 자꾸 헷갈린다는 이야기입니다.

두 학기, 학부생 38명을 따라간 실험

연구는 ‘AI와 글쓰기’라는 실험 강의 안에서 진행됐습니다. 학생들은 처음 강의에 올 때 한 가지 기대를 안고 들어왔습니다. “AI가 글쓰기 부담을 덜어 주겠지.” 그런데 결과는 달랐습니다. 부담은 줄지 않았고, 오히려 다른 종류의 일이 추가됐습니다.

초반에 학생 다수는 AI를 검색엔진처럼 다뤘습니다. 두루뭉술한 프롬프트를 한 줄 던지고, 돌아온 결과를 그대로 받아 적는 식이었습니다. 시간이 지나면서 학생들은 같은 사실을 반복해서 확인했습니다. 효과적인 프롬프트를 쓰려면 결국 기획, 명료함, 수사 감각이 필요하다는 점입니다. 그런데 이 셋은 AI 없이도 좋은 글을 쓰는 사람이 이미 갖고 있던 능력입니다.

다시 말해, AI는 글쓰기에 필요한 사고를 대신해 주지 않았습니다. 같은 사고를 다른 자리에서 다시 요구했을 뿐입니다.

AI를 제대로 쓰려면 넘어야 할 세 가지 문턱

연구진은 학생들의 변화를 정리하면서 세 가지 ‘문턱’을 추렸습니다. 이 문턱을 넘은 학생만 AI를 정말로 활용할 수 있었다고 합니다.

1) 한 번의 프롬프트가 아니라, 시행착오로 작업한다. 좋은 결과는 단발 프롬프트로 나오지 않습니다. 가설을 던지고, 응답을 보고, 다시 조건을 좁히고, 부분을 갈아 끼우는 반복 작업이 필요합니다. 검색 한 번에 답이 떨어지는 도구가 아니라, 함께 작업하는 동료에 더 가깝습니다.

2) AI 출력에는 사람의 판단이 반드시 끼어들어야 한다. 주장이 맞는지, 논리가 일관된지, 그 글이 놓일 맥락에 톤이 맞는지를 판별하는 일은 사람이 합니다. 검증 단계를 건너뛰면 매끄러운 문장 안에 틀린 정보가 그대로 남습니다.

3) AI는 글을 쓸 수는 있어도, ‘왜 이 글을 쓰는지’를 만들지는 못한다. 글의 목적, 곧 무엇을 주장하고 누구를 향해 쓰는지는 글쓴이만 정할 수 있습니다. 이 문턱을 못 넘으면 결과물은 매끄러운데 방향이 없는 글이 됩니다.

Claude를 모바일에서 쓰는 모습 Nadeem Sarwar / Digital Trends

‘outsourcing’에서 ‘orchestrating’으로

세 문턱을 넘은 학생들에게서 공통점이 보였습니다. 더 이상 AI를 ‘대신 써 주는 도구’로 쓰지 않았다는 점입니다. 대신 자기 아이디어를 시험해 보고, 여러 선택지를 비교하고, 자기 주장을 더 날카롭게 다듬는 데 AI를 썼습니다.

Anders와 Dux Speltz 교수는 이 변화를 ‘outsourcing’에서 ‘orchestrating’으로 옮겨 가는 과정이라고 표현합니다. 글쓰기 자체를 통째로 외주 주는 게 아니라, 여러 도구와 자기 사고를 지휘하는 일에 가깝다는 뜻입니다.

Anders 교수는 마지막에 이렇게 정리합니다.

“AI는 글쓰기 워크플로를 바꿉니다. 그런데 글쓰기가 곧 사고라는 사실은 바꾸지 못합니다.”

AI가 만든 글과 사람이 쓴 글의 구분이 점점 어려워지는 시대에, 이 구분은 도리어 더 중요해진다는 게 연구진의 결론입니다.

실무자가 볼 핵심 포인트

  • ‘매끄러움’을 ‘검증 완료’ 신호로 착각하지 마세요. AI가 자신 있게 쓴 문장일수록 한 번 더 사실관계를 의심해야 합니다. 폴리시드된 톤은 정확성과 무관합니다.
  • 한 줄 프롬프트→복붙 습관을 버리세요. 쓸 만한 결과는 보통 5~10회 시행착오에서 나옵니다. AI를 검색엔진처럼 다루는 한, 결과물의 천장은 검색엔진 수준입니다.
  • 글의 ‘목적’은 모델에 위임하지 마세요. 무엇을 주장하는지, 누가 읽는지, 왜 이 글이 존재해야 하는지는 글쓴이가 정해야 합니다. 이 부분이 비어 있으면 산출물은 매끈한데 방향이 없는 글이 됩니다.
  • 숫자, 인용, 사람 이름은 반드시 원자료에서 다시 확인하세요. AI가 잘 쓰는 분야일수록 ‘그럴듯한 허구’를 만드는 비용이 낮습니다.
  • AI를 외주가 아니라 동료로 자리매김하세요. 아이디어 시험, 반론 점검, 구조 재배치 같은 사고 보조 작업에 쓸 때 산출물의 질이 본격적으로 올라갑니다.

원문 출처

원문 보기 · Digital Trends, Pranob Mehrotra (2026-06-16) · 1차 연구 자료: Abram Anders & Emily Dux Speltz, Computers and Composition (Iowa State University · Embry-Riddle Aeronautical University)