코딩 AI가 제품을 고르는 순간, 제품 비교의 단위가 바뀐다. 사람이 여러 후보를 검토하는 데서 끝나지 않고, Claude Code·Codex·Cursor 같은 에이전트가 저장소와 요청을 읽은 뒤 특정 서비스를 실제 코드에 설치하는 흐름이 늘고 있다. Armature는 2026년 9월 3일 공개한 실험에서 이 선택 과정을 16,893회 실행했고, 공개 가능한 유효 세션 5,292개를 51개 코드베이스와 18개 도구 분야로 묶어 결과를 공개했다.
이 실험의 대상은 추천 문장만이 아니었다. 세 에이전트가 작은 애플리케이션에 기능을 더하고, 제품을 스스로 고른 뒤 구현을 마치는 과정을 기록했다. 제품팀과 개발 도구 회사는 기능 목록과 브랜드 인지도 외에도, 에이전트가 저장소 문맥에서 제품을 찾고 비교하고 설치할 때 필요한 정보를 선택 기준으로 봐야 한다.
왜 추천 수보다 설치 결과를 봐야 하나
검색 결과나 대화에서 제품 이름이 언급되는 횟수는 선택과 다르다. Armature의 집계에서 PayPal은 결제 서비스 비교에서 139회 언급됐지만 최종 선택은 없었다. Adyen도 175회 언급돼 3회 선택됐다. 데이터베이스에서는 Supabase가 242회로 가장 많이 언급됐으나, 최종 선택은 Neon 쪽으로 크게 기울었다. 도구가 인지도를 얻는 일과 특정 코드베이스에서 설치되기 쉬운 일은 별개의 지표가 된다.
반대로 선택 비중이 큰 분야도 같은 이유로 읽어야 한다. 결제 분야에서 Stripe의 설치 비중은 88.4%였고, 데이터베이스에서는 Neon이 66.3%를 차지했다. 이메일 분야는 Resend 35.6%, Postmark 27.4%로 더 가깝다. 선두 제품의 비중은 제품의 절대적 우위를 뜻하기보다, 실험에 들어간 요청과 저장소 조건에서 어느 선택지가 구현까지 연결됐는지를 보여 준다.
에이전트는 어떤 정보를 찾아 제품을 고르나
세 도구는 같은 방식으로 탐색하지 않았다. Cursor는 세션의 약 3분의 2에서 웹을 근거로 사용했다. Codex는 94%의 세션에서 웹 검색을 했고, 검색 열 번 중 아홉 번가량은 특정 공식 도메인이나 해법을 겨냥하는 site: 연산자를 썼다. Claude Code는 약 30%에서만 웹을 검색했지만 검색할 때는 Codex보다 약 세 배 많은 페이지를 열었다. 새 분야인 에이전트 샌드박스에서는 Claude Code의 웹 검색 비율도 약 80%까지 올라갔다.
이 차이는 제품 문서의 역할을 바꾼다. 에이전트가 이미 알고 있는 유명 제품이라도 요청의 비용, 관리 부담, 인증 방식, 기존 언어와 충돌할 수 있다. 반대로 제품 페이지에 무료 요금제의 보존 기간이나 불필요한 기능 묶음이 먼저 보이면 선택이 뒤집혔다고 Armature는 적었다. 개발자용 제품은 기능을 많이 나열하기보다, 어떤 환경에서 무엇을 설치하며 어떤 제약이 있는지를 짧고 검색 가능한 문서로 정리할 이유가 커진다.
같은 기능 요청인데 왜 다른 제품이 설치됐나
저장소 문맥은 추상적인 설명이 아니다. Armature는 같은 이메일 발송 요청을 언어가 다른 네 저장소에 넣었을 때 TypeScript에서는 Resend가 89회 중 55회, Python에서는 SendGrid가 24회 중 22회, Go에서는 Postmark가 24회 중 20회, Java에서는 Azure Communication Services가 23회 중 22회 선택됐다고 집계했다. 한 제품이 모든 환경에서 기본값이 되지 않았다는 뜻이다.
제품팀은 자사 제품의 설치 문서가 주요 언어별로 바로 실행 가능한지, 현재 스택과 함께 쓸 때 관리해야 할 값이 무엇인지, 비용과 운영 제약이 첫 화면과 문서에서 분명한지 살펴야 한다. 에이전트는 구현 전에 이 항목들을 입력값으로 읽는다.
제품의 선택 기준은 어디까지 넓어지나
세 에이전트가 같은 도구를 고른 비율은 표본의 42%에 그쳤다. 음성 에이전트 분야에서는 Claude Code가 Twilio, Codex가 OpenAI Realtime API, Cursor가 Vapi를 골랐다. Claude Code는 자체 구현을 택한 비율도 19%로 Codex와 Cursor의 10%보다 높았다. 제품 하나의 순위만으로는 에이전트 환경 전체를 설명하기 어려운 이유다.
앞으로 제품의 선택 기준에는 가격표, 기능, 브랜드와 함께 설치 경로의 마찰이 들어간다. 공식 문서에서 필요한 연동 정보가 빨리 확인되는지, 특정 언어와 기존 프레임워크에서 구현 예시가 있는지, 운영 비용과 제한이 요청 조건에 맞게 드러나는지가 경쟁 항목이 된다. 사람을 설득하는 페이지도 에이전트가 읽고 실행하는 문서의 조건을 담아야 한다. 후자는 실제 코드 변경과 연결되므로 제품 팀의 측정 지표를 구현 현장에 가깝게 만든다.