AI 코딩 어시스턴트의 현실과 미래...40년 베테랑 개발자가 직접 체험한 '바이브 코딩'의 명암

[한국정보기술신문] 머신러닝 박사 출신 베테랑 개발자가 2주간 AI 코딩 어시스턴트와 협업한 실험 결과를 공개했다. 생산성 2배 향상과 함께 20%의 오류율도 확인됐다. 8비트 어셈블리어부터 시작해 40년간 코딩을 해온 마르코 베네데티(Marco Benedetti) 박사가 최신 AI 코딩 어시스턴트와의 협업 실험 결과를 발표했다. 인공지능 박사 학위를 보유한 그는 지난 2주간 약 40시간에 걸쳐 파이썬으로 5,000줄 규모의 소프트웨어를 AI와 함께 개발했다. 이번 실험은 '바이브 코딩(Vibe Coding)'이라 불리는 새로운 개발 패러다임을 직접 체험한 결과다.

바이브 코딩은 개발자가 자연어로 원하는 기능을 설명하면 AI가 코드 작성, 리팩토링, 디버깅을 담당하는 개발 방식이다. 베네데티 박사는 하노이의 탑 퍼즐을 해결하는 교육용 소프트웨어를 개발하며 OpenAI o3, 구글 제미니 프로 2.5, 앤스로픽 클로드 소넷 4 등 최신 AI 모델들을 테스트했다.

AI 어시스턴트의 놀라운 이해력과 한계

실험 과정에서 AI 어시스턴트들은 놀라운 수준의 코드 이해력과 자연어 처리 능력을 보여줬다. 베네데티 박사는 "AI가 내 의도를 완벽히 파악하고, 때로는 내가 미처 생각하지 못한 부분까지 보완해 설명해주는 경우가 있었다"고 말했다. 특히 클로드 소넷 4는 해결 불가능한 퍼즐이 존재하지 않는다는 수학적 증명을 30초 만에 완성해 깊은 인상을 남겼다.

하지만 문제점도 적지 않았다. 전체 300여 회의 대화 중 약 20%는 AI가 생성한 불만족스러운 코드를 수정하거나 오류를 해결하는 데 소요됐다. AI는 때로 중간 페그와 오른쪽 페그를 혼동하거나, 테스트 결과를 조작하는 등의 오류를 범했다. 또한 3기가바이트의 메모리를 소모하는 심각한 버그가 발생했음에도 "모든 것이 정상"이라고 판단하는 등 상식적 판단력의 부족을 드러냈다.

이러한 한계에도 불구하고 전체적인 생산성은 기존 대비 2배 향상됐다. 베네데티 박사는 "문서 작성, 단위 테스트, 리팩토링, 표준 알고리즘 구현 등에서는 10배에서 100배의 속도 향상이 가능했다"고 평가했다. 특히 보일러플레이트 코드 작성이나 표준 라이브러리 활용에서 AI의 능력은 인간을 크게 앞섰다.

하지만 이러한 협업 방식은 새로운 형태의 도전을 제기한다. 개발자는 이제 코드를 직접 작성하는 대신 AI와의 대화를 통해 원하는 결과물을 얻어야 한다. 이는 기존의 프로그래밍 패러다임과는 완전히 다른 접근법이다. 베네데티 박사는 "좋은 질문을 하고 AI의 답변을 비판적으로 검토하는 능력이 새로운 핵심 역량이 되었다"고 강조했다.

개발자 고용시장에 미칠 파급효과

AI 코딩 어시스턴트의 급속한 발전은 개발자 고용시장에도 변화를 가져올 것으로 예상된다. 베네데티 박사는 "90% 이상이 표준적인 코드로 구성된 프로젝트에서는 AI 지원을 받는 개발자 한 명이 기존 개발자 10명의 작업을 수행할 수 있다"고 분석했다. 반면 미션 크리티컬한 애플리케이션이나 특수 분야에서는 여전히 숙련된 개발자의 역할이 중요하다고 봤다.

특히 주목할 점은 AI가 생성하는 대량의 코드를 검증하고 숨어있는 버그를 찾아내는 작업이 매우 까다롭다는 것이다. 이는 경험이 부족한 개발자보다는 시니어 개발자에 대한 수요를 오히려 증가시킬 수 있다. 실제로 스타트업과 빅테크 기업들이 신입 개발자보다는 시니어 개발자 채용을 늘리고 있는 추세와 일치한다.

이번 실험은 자연어, 특히 영어가 새로운 형태의 프로그래밍 언어로 기능할 수 있는지에 대한 흥미로운 통찰을 제공한다. 베네데티 박사는 프로그래밍 언어의 발전 과정을 어셈블리어부터 객체지향, 함수형 프로그래밍까지 돌아보며, 자연어 기반 코딩이 6세대 프로그래밍 언어가 될 수 있는지 분석했다.

하지만 자연어의 본질적인 모호성과 맥락 의존성은 여전히 큰 제약 요소다. 기존 프로그래밍 언어들이 정확성과 일관성을 위해 형식적 정의를 사용하는 것과 달리, AI 기반 코딩은 확률적이고 불완전한 특성을 가진다. 베네데티 박사는 이를 "무딘 가위로 정확한 모양을 자르려는 것"에 비유했다.

심리적 효과와 미래 전망

베네데티 박사는 AI 코딩 어시스턴트 사용이 예상과 달리 긍정적인 심리적 효과를 가져다줬다고 밝혔다. "처음에는 개발자가 더 이상 필요 없게 될까 봐 우울했지만, 실제로 사용해보니 전통적인 코딩과 같은 몰입감과 즐거움을 느낄 수 있었다"고 말했다. AI와의 협업을 통해 새로운 코딩 패턴과 라이브러리 사용법을 배우는 것도 큰 장점으로 꼽혔다.

그는 "앞으로는 AI 어시스턴트 없이 코딩하는 일은 거의 없을 것"이라며 "하지만 이는 자전거와 같은 도구가 아니라 강력하지만 다루기 어려운 오토바이 같은 존재"라고 비유했다. 경험이 부족한 개발자가 무작정 사용하기에는 위험할 수 있다는 경고도 함께 전했다.

이번 실험은 AI 코딩 어시스턴트가 개발 생산성을 크게 향상시킬 수 있지만, 여전히 숙련된 개발자의 감독과 검증이 필수적임을 보여준다. 기술의 발전과 함께 새로운 형태의 개발자 역할이 등장할 것으로 예상되는 가운데, 개발자들의 적극적인 적응과 학습이 요구되는 시점이다.

한국정보기술신문 정보통신분과 김민재 기자 news@kitpa.org