한국정보기술진흥원2027 동계 청소년 IT학술대회 및 대학생 IT논문경진대회 개최안내

존더랩스 "AI 슬롭의 본질은 불명확한 글쓰기"...AI 기사 문장 54%가 불명확, 사람 기사는 10%

AI 글이 읽기 힘든 이유는 특유의 표현이 아니라 불명확성 때문이라는 분석이 나왔다.
[한국정보기술신문] AI 글쓰기를 연구하는 존더랩스(Zonder Labs)가 지난 9일 'AI 슬롭(AI Slop)' 분석 보고서를 공개했다. AI 슬롭은 AI가 대량으로 만든 저품질 글을 뜻하는 말이다. 보고서는 AI 글이 읽기 힘든 가장 큰 이유로 불명확한 문장을 꼽았다. 분석 결과 AI가 쓴 기사는 문장의 54%가 불명확했다. 사람이 쓴 기사는 10%에 그쳤다.
image.png
Unsplash 제공

업무용 슬롭에 초점

보고서는 AI 슬롭을 두 종류로 나눴다. 첫째는 소셜미디어 게시물처럼 읽지 않고 넘겨도 되는 '캐주얼 슬롭'이다. 둘째는 업무 중 반드시 읽고 이해해야 하는 '업무용 슬롭'이다. 사내 메신저 메시지나 코드 변경 요청(PR) 설명이 여기에 해당한다. 보고서는 이 가운데 업무용 슬롭을 집중적으로 다뤘다.
명확성을 판단하는 기준으로는 조지프 윌리엄스의 글쓰기 교재 'Style: The Basics of Clarity and Grace'를 썼다. 보고서는 무엇이 명확한 글인지에 대해 사람들 사이의 합의가 강하다고 설명했다. 이 합의를 판단의 기준으로 삼았다는 것이다.

코딩 AI 답변은 78%가 불명확

비교 대상은 기사와 코딩 답변 두 분야다. 기사 분야에서는 AI 기사의 불명확 문장 비율이 54%, 사람 기사가 10%였다. 코딩 분야에서는 격차가 더 컸다. 앤트로픽의 코딩 도구 클로드 코드(Claude Code)의 답변은 78%가 불명확했다. 개발자 질의응답 사이트 스택오버플로의 답변은 11%였다.
연구진은 AI 탐지기 '아이디어렌즈(IdeaLens)'로도 같은 글을 검사했다. AI 기사와 클로드 코드 답변은 모두 99%가 AI 생성으로 판정됐다. 사람 기사는 4%, 스택오버플로 답변은 0%였다.
보고서는 언어 모델의 글쓰기 능력이 코딩 능력보다 뒤처져 있다고 진단했다. 코딩은 결과의 옳고 그름을 판단하기 쉬워 학습 보상을 설계하기 쉽다. 단기적인 경제적 가치도 커서 개선이 먼저 이뤄졌다는 설명이다.

불명확한 문장의 세 가지 유형

보고서는 불명확한 문장을 세 가지 결함으로 분류했다. 첫째는 '숨겨진 주체와 행위'다. 문장의 실제 주인공과 행동이 문법상 주어와 동사에 드러나지 않는 경우다. 행동이 동사가 아닌 명사 속에 묻히는 것이 대표적이다.
둘째는 '모호한 표현'이다. 무엇을 가리키는지 불분명한 지시어, 명사를 여러 개 겹쳐 쓴 표현, 어색한 단어 선택이 해당한다. 클로드 코드 답변에서 가장 흔하게 나타난 결함이다. 보고서는 "AI는 사람들이 보통 사물을 묘사하는 방식에 대한 상식이 부족해 보인다"고 지적했다.
셋째는 '내용 없는 문장과 잘못된 강조'다. 단어는 모두 이해되지만 요점을 찾기 어려운 문장을 말한다. 보고서는 핵심을 문장 앞쪽에 두면 글이 훨씬 빨리 읽힌다고 설명했다.

"delve와 대시가 문제는 아냐"

보고서는 흔히 AI 글의 표시로 알려진 특징이 슬롭의 원인은 아니라고 주장했다. 영어권에서는 'delve(파고들다)' 같은 단어나 긴 대시(—)가 AI 글의 특징으로 자주 거론된다. 보고서는 이런 표현이 글을 엉성하게 만드는 것이 아니며 문제는 명확성이라고 밝혔다.
보고서는 실제 사례도 함께 제시했다. 클로드 코드가 GPU용 트라이톤(Triton) 코드를 쿠다(CUDA)로 다시 구현한 작업 기록이다. 해당 작업은 기존 성능과 2% 이내 오차로 재현됐다. 일부 설정에서는 3~5%의 성능 개선도 얻었다. 그러나 작업 결과를 설명하는 답변에는 불명확한 문장이 다수 있었다. 보고서는 이를 주석으로 표시해 보여줬다.

표본 규모 등 연구 방법은 공개 안 돼

다만 이번 분석에는 한계도 있다. 보고서는 분석한 기사와 답변의 표본 수와 출처를 밝히지 않았다. 문장의 명확성을 사람이 판정했는지 AI 모델이 판정했는지도 공개하지 않았다. 판정에 참여한 인원도 알려지지 않았다. 결함 유형별 세부 수치는 도표 표기가 본문과 맞지 않아 정확히 확인하기 어렵다.
연구진은 자신들의 측정 방식이 최소한의 기준이라고 밝혔다. 실제 문제는 측정 결과보다 더 클 수 있다는 뜻이다. 보고서는 "오늘날 AI는 그 결과물을 읽는 사람에게 명확성을 빚지고 있다"며 글을 맺었다.
한국정보기술신문 인공지능분과 권지현 기자 news@kitpa.org

함께 읽으면 좋은 기사

삼성전자, 갤럭시 S26 대상 One UI 9.5 베타 프로그램 시작...한국 등 6개국서 카메라·앱 잠금·헬스 신기능 먼저 공개

삼성전자, 갤럭시 S26 대상 One UI 9.5 베타 프로그램 시작...한국 등 6개국서 카메라·앱 잠금·헬스 신기능 먼저 공개

정보통신 2분
존더랩스 "AI 슬롭의 본질은 불명확한 글쓰기"...AI 기사 문장 54%가 불명확, 사람 기사는 10%

존더랩스 "AI 슬롭의 본질은 불명확한 글쓰기"...AI 기사 문장 54%가 불명확, 사람 기사는 10%

인공지능 2분
구글, 제미나이 4 네온 공개...성능과 비용 균형 맞춘 중간급 프런티어 모델

구글, 제미나이 4 네온 공개...성능과 비용 균형 맞춘 중간급 프런티어 모델

인공지능 3분
자바 Base64 디코더서 원격 코드 실행 취약점 '자바포셸' 공개...CVSS 9.2 '치명적' 등급

자바 Base64 디코더서 원격 코드 실행 취약점 '자바포셸' 공개...CVSS 9.2 '치명적' 등급

정보보안 3분
엔진엑스 HTTP/2서 원격 코드 실행 취약점 2건 공개...위즈 "AI로 찾아내, 즉시 업데이트 필요"

엔진엑스 HTTP/2서 원격 코드 실행 취약점 2건 공개...위즈 "AI로 찾아내, 즉시 업데이트 필요"

정보보안 · 인공지능 3분
버거킹·맥도날드·트럼프 15년 전 트윗 속 Bitly 링크 탈취돼...계정 해킹 없이 단축 주소만 재등록한 '깨진 링크 탈취'

버거킹·맥도날드·트럼프 15년 전 트윗 속 Bitly 링크 탈취돼...계정 해킹 없이 단축 주소만 재등록한 '깨진 링크 탈취'

정보보안 3분
알리바바, 차세대 플래그십 AI '큐원4-맥스' 정식 출시...100만 토큰 처리에 이용료는 25% 낮춰

알리바바, 차세대 플래그십 AI '큐원4-맥스' 정식 출시...100만 토큰 처리에 이용료는 25% 낮춰

인공지능 3분
애플 iCloud·앱스토어·애플페이 동시 장애...일주일 새 두 번째 계정 인증 대란

애플 iCloud·앱스토어·애플페이 동시 장애...일주일 새 두 번째 계정 인증 대란

클라우드 · 정보보안 3분
오픈AI, 'GPT-6.2 아스트라·솔' 동시 출시...아스트라 API 가격 20% 인하

오픈AI, 'GPT-6.2 아스트라·솔' 동시 출시...아스트라 API 가격 20% 인하

인공지능 3분
젠슨 황 "이사회가 원하면 엔비디아 CEO로 복귀하겠다"...사임 닷새 만에 첫 공개 입장

젠슨 황 "이사회가 원하면 엔비디아 CEO로 복귀하겠다"...사임 닷새 만에 첫 공개 입장

반도체 3분
레벨 인피니트 '승리의 여신: 니케' PC 런처 해킹돼 악성코드 유포...비밀번호·가상자산 지갑 노린 공급망 공격, 5일 공식 사과

레벨 인피니트 '승리의 여신: 니케' PC 런처 해킹돼 악성코드 유포...비밀번호·가상자산 지갑 노린 공급망 공격, 5일 공식 사과

기술보안 · 정보보안 4분
세가 아케이드망 'ALL.Net' 해킹에 日 게임센터 마비...반다이남코 8종·국제판까지 피해, 복구 시점은 미정

세가 아케이드망 'ALL.Net' 해킹에 日 게임센터 마비...반다이남코 8종·국제판까지 피해, 복구 시점은 미정

기술보안 · 정보보안 7분