Anthropic 연구가 말한 ‘AI 코딩 도구 역효과’의 정체
AI 코딩 도구는 개발 속도를 올려주는 ‘부스터’처럼 보이지만, 새로운 기술을 배우는 순간에는 오히려 학습을 망칠 수 있습니다. Anthropic의 실험 연구는 “AI를 쓰면 더 빨라질 것”이라는 기대와 달리, 이해도 점수는 떨어지고 시간 절약도 크지 않았다는 결과를 보여줍니다. 오늘 글에서는 연구 내용을 바탕으로, 왜 이런 일이 생겼는지와 “이유를 묻는 방식”으로 AI를 학습 도구로 바꾸는 실전 팁까지 정리해볼게요.
Anthropic 연구 요약: 점수는 -17%, 시간은 그대로
연구진은 Python을 최소 1년 이상 다뤄본 주니어 개발자 52명을 대상으로, ‘Trio’라는 비동기(async) 라이브러리를 학습하며 과제를 수행하게 했습니다. 한 그룹은 AI 코딩 어시스턴트의 도움을 받을 수 있었고, 다른 그룹은 문서와 웹 검색만 허용됐죠.1
결과는 의외였습니다. AI 도움을 받은 그룹이 과제 이후 지식 테스트에서 평균 17% 낮은 점수를 받았고, 평균 작업 시간도 통계적으로 유의미하게 줄지 않았습니다.1 “학습은 덜 했지만 더 빨랐다” 같은 깔끔한 교환관계조차 성립하지 않은 셈입니다.
왜 속도도 안 빨라졌을까: 코딩 대신 ‘질문 작성’에 시간을 씀
AI를 쓰면 당연히 빨라질 것 같은데, 실험에서는 평균적으로 그렇지 않았습니다. 이유 중 하나는 많은 참가자가 코딩 시간을 “프롬프트 짜는 시간”으로 바꿔치기했기 때문입니다. 어떤 참가자는 제한된 과제 시간의 30% 이상을 AI에게 무엇을 물어볼지 고민하고 입력하는 데 사용하기도 했습니다.1
즉, AI가 코드를 뱉어주는 속도는 빠른데, 사람은 그 코드를 얻기 위해 맥락 설명하고 조건 붙이고 재질문하고 검증하는 과정에서 시간을 쓰게 됩니다. 결국 “코딩을 줄인 만큼 질문이 늘어난” 구조가 되면, 체감 속도는 크게 안 달라질 수 있어요.
진짜로 깎인 능력: 이해·읽기·디버깅 (특히 디버깅)
이 연구에서 하락폭이 컸던 건 “문법 지식”이 아니라, 실제 현업에서 더 무서운 영역이었습니다. 개념 이해, 코드 읽기, 디버깅 능력이 전반적으로 낮아졌고, 특히 디버깅 관련 문항에서 격차가 크게 나타났다고 보고합니다.1
이건 현실과 잘 맞습니다. AI가 만든 코드는 겉보기엔 그럴듯해서 ‘통과’시키기 쉽고, 막상 에러가 나도 어디서부터 추적해야 할지 감이 안 잡힙니다. 쉽게 말해, AI는 코드를 대신 써주지만 “내 머릿속에 디버깅 지도”까지 그려주진 않아요.
아이러니: ‘에러를 많이 만난 사람’이 더 잘 배웠다
흥미로운 대목은 AI를 쓰지 않은 그룹이 과제 중 에러를 더 많이 겪었다는 점입니다.1 보통 에러는 귀찮은 방해물인데, 이 실험에서는 그 방해물이 오히려 학습 장치 역할을 했습니다.
직접 부딪힌 오류를 해결하려면, 비동기 함수/코루틴 개념이나 실행 흐름을 머릿속에서 재구성해야 합니다. 이때 생기는 “내가 만든 가설 → 수정 → 재검증”의 루프가 개념을 단단하게 만들죠. 반대로 AI가 에러를 미리 막아주면, 그만큼 학습 루프가 생략됩니다.
해결책은 금지가 아니라 ‘이유를 묻는 사용법’이다
그렇다면 결론은 “AI 쓰지 마세요”일까요? 연구의 뉘앙스는 정반대에 가깝습니다. 핵심은 AI 상호작용 방식에 따라 학습 결과가 갈린다는 점입니다.1
학습에 도움이 되는 패턴은 공통적으로 ‘인지적 참여’를 요구합니다. 예를 들어 AI가 생성한 코드에 대해 “이 줄이 왜 필요한지”, “이 방법 말고 다른 방법은 없는지”, “이 코드가 어떤 실패 케이스를 가지는지”처럼 구체적으로 설명을 요구하는 방식이죠.1
정리하면, AI에게 “정답”을 받는 대신 “이유”를 캐묻는 순간, AI는 복사-붙여넣기 기계가 아니라 과외 선생님이 됩니다.
시사점은 분명합니다. AI 코딩 도구는 반복적이고 익숙한 업무에서는 생산성을 끌어올릴 수 있지만, 새 라이브러리·새 프레임워크처럼 ‘처음 배우는 것’에서는 역으로 실력을 갉아먹을 수 있습니다.1 특히 안전이 중요한 소프트웨어에서는, 사람이 검토하고 디버깅할 역량 자체가 약해질 위험을 연구진이 경고합니다.1
그래서 저는 이렇게 권하고 싶어요. 새로운 기술을 배울 때만큼은 AI에게 “코드 작성”을 맡기기 전에, 질문을 바꾸세요. “이거 만들어줘” 대신 “왜 이렇게 해야 해?”로요. 그 한 문장 차이가, 당신의 실력을 지키는 가장 현실적인 안전장치가 될 수 있습니다.
참고
이 노트는 요약·비평·학습 목적으로 작성되었습니다. 저작권 문의가 있으시면 에서 알려주세요.
키워드만 입력하면 나만의 학습 노트가 완성돼요.
책이나 강의 없이, AI로 위키 노트를 바로 만들어서 읽으세요.
콘텐츠를 만들 때도 사용해 보세요. AI가 리서치, 정리, 이미지까지 초안을 바로 만들어 드려요.