숙련된 소프트웨어 개발자들이 AI를 사용할 때 작업 속도가 19% 느려진다는 연구 결과가 나왔습니다

최근 인공지능 연구 비영리 단체인 METR이 실시한 연구 결과가 큰 화제를 불러일으켰습니다. 이 연구는 예상과는 다른 사실을 밝혀냈는데, 바로 숙련된 소프트웨어 개발자들이 익숙한 코드베이스에서 인공지능 도구를 사용해야 할 경우 작업 속도가 19% 느려진다는 것입니다. 

이 연구는 올해 초 수년간의 경력을 가진 개발자 그룹을 대상으로 진행되었습니다. 이 그룹은 주로 Cursor를 AI 도구로 사용하여 자신들이 잘 알고 있는 오픈 소스 프로젝트에서 작업을 완료하는 데 도움을 받았습니다.

연구 이전에 오픈소스 개발자들은 AI와 협업하면 작업 속도가 빨라질 것이라고 믿었으며, 많은 개발자들이 작업 완료 시간이 24% 단축될 것으로 예상했습니다.

인공지능을 이용해 작업을 완료한 후에도 개발자들은 작업 완료 시간이 20% 단축되었다고 확신했습니다.

하지만 연구 결과는 정반대였습니다. AI와 협업하면 작업 완료 시간이 19% 증가하는 것으로 나타났습니다.

우리는 인공지능에 대해 아직 모르는 것이 많습니다

이번 결과는 X 플랫폼 개발자들 사이에서 놀라움을 자아냈지만, 연구의 주 저자인 조엘 베커와 네이트 러쉬는 오히려 더 놀랐습니다. 러쉬는 "당연히 2배 정도 빨라질 것"이라고 예상했고, 실험 시작 전에 그렇게 적어두었기 때문입니다.

이전에는 인공지능이 인간 엔지니어의 생산성을 크게 향상시킬 것이라는 믿음이 널리 퍼져 있었고, 여러 기업들이 이러한 전망을 바탕으로 소프트웨어 개발을 지원하는 인공지능 제품을 판매하는 회사에 상당한 투자를 해왔습니다.

하지만 이 연구는 잘못된 가정을 밝혀냈을 뿐, 인공지능이 인간의 일자리를 빼앗을 것이라는 일반적인 두려움을 바꾸지는 못했습니다. 실제로 프로그래밍 분야에서도 이미 변화가 시작되었으며, 인공지능이 초급 코딩 직종을 대체할 것으로 예상됩니다.

의 CEO인 다리오 아모데이는 앤트로픽이러한 견해에 동의하는 사람 중 한 명이며, 향후 1년에서 5년 안에 이러한 일이 일어날 수 있다고 믿습니다.

이전 연구들은 인공지능이 코더와 소프트웨어 개발자의 작업 속도를 크게 향상시킬 것이라는 믿음을 심어주었지만, METR 연구는 이러한 이점이 모든 소프트웨어 개발 시나리오에 적용되는 것은 아니라는 점을 보여주었습니다.

특히, 이 연구는 규모가 크고 이미 확립된 오픈 소스 코드베이스의 특성과 요구 사항을 잘 알고 있는 숙련된 개발자들이 가장 큰 영향을 받았다는 것을 입증할 수 있었습니다.

연구 저자들은 또한 다른 연구들이 인공지능에 대한 소프트웨어 개발 벤치마크에 의존하는 경우가 있으며, 때때로 실제 작업 환경을 잘못 반영하는 경우가 있다고 지적했습니다.

개발자들이 작업 속도를 늦춘 원인으로는 AI 모델이 제안한 내용을 검토하고 수정하는 데 시간이 소요되는 점 등이 지적되었습니다.

저자들은 이러한 속도 저하 현상이 다른 시나리오에는 적용되지 않을 것으로 예상하며, 이러한 결과에도 불구하고 연구 참가자 대다수와 연구 저자들은 현재까지도 Cursor를 계속 사용하고 있습니다.

왜 그럴까요? 저자들은 인공지능이 사용 경험을 더 쉽게 만들어주기 때문에, 결과적으로 그것이 덜 귀찮게 느껴지기 때문이라고 말합니다.

최근 기술 업계의 대규모 해고에도 불구하고 소프트웨어 개발자들은 AI에 대해 걱정하지 않습니다

럽게 받아들이고 해당 도구를 계속 사용하는 것을 보면 METR 연구의 , 더 많은 기술 전문가들이 AI를 위협보다는 협력자로 인식하고 있다는 것이 분명합니다.

유감스럽게도, 주요 기업들의 AI 도입과 명확하게 연관된 대규모 해고가 계속되면서 기술 업계에 어려움이 닥칠 가능성이 있습니다.

마이크로소프트는 올해 이미 최대 9,000명의 직원을 해고했으며, 최근 해고 대상의 40%는 소프트웨어 엔지니어였는데, 이는 코드 작성 작업이 AI 도구로 아웃소싱되었기 때문이라고 주장했습니다.

이 회사는 사상 최고 실적을 기록하며 시가총액이 엔비디아 바로 뒤, 애플 바로 앞에 머무르는 상황을 유지해왔다는 점을 들어 이번 해고를 정당화했습니다.

구글은 AI 스타트업 앤트로픽에 투자한 후 수백 명의 직원을 해고한 또 다른 주요 기술 기업이지만, 해고된 직원 모두가 AI로 대체된 것은 아닙니다.

세일즈포스와 인텔을 비롯한 다른 기업들도 AI로의 전환을 구조조정 이유로 들며 감원을 발표했습니다. 세일즈포스는 올해 AI 관련 직무에 집중하기 위해 1,000개의 일자리를 감축했고, 인텔은 15,000명의 직원을 줄였으며, IBM은 2030년까지 사무직의 30%를 AI로 대체할 계획입니다.