클래스도산

AI·자동화 트렌드

AI 에이전트가 장바구니에서 멈추는 이유, 통과 조건 3가지

Ryan2026-11-04 · 읽는 데 8분

AI 브라우저 에이전트 대응, 우리 사이트가 통과해야 할 3가지 조건

"장바구니까지는 갔어요. 거기서 멈췄습니다."

AI 에이전트가 장바구니에서 멈추는 이유, 통과 조건 3가지 커버

핵심 정보를 로그인 앞으로 꺼내고, 구조화 데이터로 표시하고, 봇 토큰을 역할별로 나누세요. 이 세 가지가 에이전트 시대의 통과 조건입니다.

에이전트가 제품 페이지를 읽고, 옵션을 고르고, 담고 — 그리고 "회원가입 후 이용 가능합니다"에서 정지합니다. 사용자는 왜 멈췄는지 모릅니다. 그냥 다른 데로 갑니다. 그 방문은 이탈로도 집계되지 않아요.

AI 브라우저 에이전트란 뭐고, 챗봇과 어떻게 다른가요?

읽기만 하던 AI가 클릭하기 시작했다는 게 차이입니다.

AI 브라우저 에이전트란 뭐고, 챗봇과 어떻게 다른가요? 개념 일러스트

OpenAI는 2025년 10월 21일 ChatGPT Atlas를 공개하면서 에이전트 모드를 함께 내놨습니다. 사용자를 대신해 탭을 열고 링크를 누르고 폼을 채우는 기능이에요.1 Perplexity의 Comet도 같은 방향입니다. 질문에 답하는 대신 브라우저 안에서 작업을 끝내는 쪽으로 설계됐습니다.2

평가 대상이 바뀝니다. 콘텐츠가 좋은지가 아니라, 동작이 끝까지 완료되는지가 기준입니다.

보충. SEO의 연장이 아니라 UX 문제예요. 에이전트는 불친절한 화면에 항의하지 않습니다. 그냥 다음 후보로 넘어갑니다.

에이전트는 어디서 막히나요?

로그인 장벽, 구조화 데이터 부재, 봇 룰, 그리고 JS 렌더링 — 이 네 곳입니다.

막히는 지점증상통과 임계값
로그인 장벽가격·조건이 인증 뒤에 있어 답을 못 만듦비로그인 상태에서 클릭 3회 이내 도달
구조화 데이터 부재가격·날짜·FAQ를 특정 못 함매출 직결 템플릿에 Schema.org 타입 1개 이상 유효
봇 룰 충돌robots.txt와 WAF가 서로 다른 말을 함두 설정의 허용 토큰 목록이 일치
클라이언트 렌더링가격이 JS 실행 후에만 생김JS 끈 상태의 HTML에 가격·조건 텍스트 존재

세 번째가 제일 자주 사고를 냅니다. 보안팀이 작년에 걸어둔 룰이 살아 있고, 마케팅팀은 그 존재를 모릅니다.

로그인 장벽, 전부 없애야 하나요?

아니요. 여는 건 "판단 정보"고, 닫아둘 건 "권한"입니다.

구매를 판단하는 데 필요한 것 — 가격 체계, 이용 조건, 재고, 상담 경로 — 는 인증 없이 읽히게 두세요. 결제 승인, 개인정보 열람, 계약 체결은 사람의 명시적 확인을 거치게 유지합니다. OpenAI 자신이 Atlas 발표에서 프롬프트 인젝션 위험을 명시했어요. 악성 페이지가 에이전트에게 숨긴 지시를 심어 로그인된 세션의 권한을 악용하는 공격입니다.1

"허물까 지킬까"는 틀린 질문이에요. 정보는 열고 권한은 닫는, 두 개의 다른 작업입니다.

구조화 데이터, 안 넣으면 어떻게 되나요?

조용히 빠집니다. 에러도 경고도 없이요.

Google은 구조화 데이터를 페이지 내용에 관한 표준화된 정보를 제공해 콘텐츠를 분류하는 형식으로 정의하고, 이를 통해 의미를 명시적으로 전달한다고 설명합니다.3 핵심은 "명시적"입니다. 마크업이 없으면 기계는 추론하고, 추론은 틀립니다. 정가와 할인가가 나란히 있는 페이지에서 사람은 판매가를 알지만 파서는 모릅니다.

순서는 매출 가까운 쪽부터예요. 상품·서비스 페이지에 Product와 Offer로 가격·통화·재고를 박고, 자주 묻는 질문 영역에 FAQPage, 오프라인 거점이 있으면 LocalBusiness로 주소와 영업시간을 선언합니다. 그다음 리치 결과 테스트로 유효성만 보면 1차는 끝납니다.

비개발자 실무자분들은 여기서 "개발 티켓을 끊어야 하나" 하고 멈추시는데, 실제 작업은 JSON-LD 한 블록을 템플릿에 붙이는 수준입니다. 클래스도산의 클로드 바이브 코딩 원데이 클래스에서 5시간 안에 결과물 하나를 완성하는 난이도가 대략 이 선이에요.

robots.txt, AI 크롤러마다 다르게 설정해야 하나요?

네. 한 줄로 전부 막는 설정이 가장 위험합니다.

robots.txt, AI 크롤러마다 다르게 설정해야 하나요? 개념 일러스트

토큰이 역할별로 쪼개져 있기 때문입니다. 학습용 크롤러와, 사용자가 질문한 순간 페이지를 가져오는 요청은 다른 이름으로 옵니다. 후자를 막으면 고객이 지금 던진 질문에 대한 답에서 우리 사이트가 빠집니다.

토큰주체역할막으면 잃는 것
GPTBotOpenAI학습용 크롤러모델 학습 반영
OAI-SearchBotOpenAI검색 색인ChatGPT 검색 노출
ChatGPT-UserOpenAI사용자 요청 페치실시간 답변 내 인용
ClaudeBotAnthropic학습용 크롤러모델 학습 반영
PerplexityBot / Perplexity-UserPerplexity색인 / 사용자 요청색인 등재 / 실시간 인용
Google-ExtendedGoogleGemini 학습 활용 제어검색 순위는 영향 없음

Google-Extended를 막아도 Google 검색 노출은 그대로라는 점은 공식 문서에 명시돼 있습니다.4 OpenAI 쪽 세 토큰의 역할 구분도 공식 문서에 나와 있어요.5 학습은 막고 인용은 받는 조합이 가능하니, 목적을 먼저 정하고 토큰을 고르세요.

전제 하나. robots.txt는 강제력이 없습니다. 표준인 RFC 9309 자체가 자발적 준수 프로토콜로 규정하고 있어요.6 실효적 차단은 WAF나 서버 단이 함께 있어야 합니다. 2025년 Cloudflare가 신규 도메인에 AI 크롤러 기본 차단을 적용하고 Content Signals Policy를 내놓은 배경이 여기입니다.7

트래픽이 줄어든다는 전망, 믿어야 하나요?

방향은 믿는 편이 안전합니다. Gartner는 2024년 2월, AI 챗봇과 가상 에이전트의 영향으로 2026년까지 전통적 검색엔진 이용량이 25% 감소할 것으로 전망했습니다.8 Cloudflare가 2025년 공개한 데이터에서도 AI 크롤러의 크롤링 횟수 대비 실제 방문 유입은 전통 검색엔진과 비교해 현저히 불균형했습니다.7 많이 읽어가고, 적게 돌려보냅니다.

총량 방어는 이미 진 싸움이에요. 판정 기준을 바꿉니다.

에이전트 통과 3조건 (클래스도산)

  1. 도달 — 비로그인 상태에서 가격·조건·연락 경로에 클릭 3회 이내로 닿나요?
  2. 판독 — 매출 직결 템플릿에 유효한 Schema.org 마크업이 있나요?
  3. 일관성 — robots.txt 허용 목록과 WAF 룰이 같은 토큰을 허용하나요?

하나라도 실패면 그 방문은 완료되지 않습니다. 이번 주 할 일은 하나로 좁히셔도 돼요. 시크릿 창으로 들어가 고객이 가장 자주 하는 질문의 답을 끝까지 찾아보세요. 막히는 지점이 곧 에이전트가 막히는 지점입니다. 🙂

자주 묻는 질문

Q. 우리 사이트에 이미 봇 차단 룰이 걸려 있는지 어떻게 확인하나요? A. 서버 접근 로그에서 User-Agent별 응답 코드를 봅니다. GPTBot·ChatGPT-User·PerplexityBot에 403이나 429가 돌아가면 차단 중이고, robots.txt에는 그 내용이 안 적혀 있을 수 있습니다. 두 설정을 따로 확인하세요.

Q. GPTBot을 차단하면 ChatGPT에서 우리 회사가 아예 안 나오나요? A. 학습 경로는 끊기지만 색인·사용자 요청 토큰은 별개입니다. 다만 외부 매체에 실린 정보는 계속 참조되니, 통제력은 오히려 줄어드는 쪽입니다.

Q. 에이전트에게 결제까지 맡기도록 열어야 하나요? A. 지금은 권하지 않습니다. 프롬프트 인젝션 위험이 공식적으로 지적된 상태라, 결제·계약에는 사람의 확인 단계를 남기세요.

Q. 개선 효과를 뭘로 측정하나요? A. 로그에서 AI 토큰별 요청 수와 리퍼럴 유입을 나눠 보세요. 요청은 늘고 유입은 그대로라면 2번 조건(판독)이 아직 안 된 상태입니다.

출처

발행 전 확인 요청: 이번 세션에서도 웹 검색 권한이 승인되지 않아 출처 URL과 수치를 재확인하지 못했습니다. Gartner 25% 전망(발표일·수치), Cloudflare 블로그 슬러그, Perplexity Comet 페이지 경로는 원문 대조를 권합니다. ClaudeBot·PerplexityBot·Perplexity-User는 각 사 공식 문서에 존재하는 토큰이지만 문서 URL을 확인하지 못해 각주를 달지 않았고, 표에는 역할만 적었습니다. Cloudflare의 크롤 대비 리퍼럴 비율은 정확한 배수를 확인할 수 없어 방향만 서술했습니다.

Footnotes

  1. OpenAI, 「Introducing ChatGPT Atlas」(2025-10-21). 에이전트 모드의 클릭·폼 작성 수행 및 프롬프트 인젝션 위험 설명. https://openai.com/index/introducing-chatgpt-atlas/ ↩ ↩2

  2. Perplexity, 「Introducing Comet」. 에이전트형 브라우징 공식 설명. https://www.perplexity.ai/hub/blog/introducing-comet ↩

  3. Google Search Central, 「Intro to how structured data markup works」. https://developers.google.com/search/docs/appearance/structured-data/intro-structured-data ↩

  4. Google Search Central, 「Overview of Google crawlers and fetchers」. Google-Extended의 검색 순위 비영향 명시. https://developers.google.com/search/docs/crawling-indexing/overview-google-crawlers ↩

  5. OpenAI, 「Bots」. GPTBot·OAI-SearchBot·ChatGPT-User의 역할 구분. https://platform.openai.com/docs/bots ↩

  6. IETF RFC 9309, 「Robots Exclusion Protocol」(2022). robots.txt의 자발적 준수 성격. https://www.rfc-editor.org/rfc/rfc9309.html ↩

  7. Cloudflare Blog, AI 크롤러 기본 차단 및 Content Signals Policy 발표(2025). 크롤링 대비 리퍼럴 불균형 데이터 포함. https://blog.cloudflare.com/content-independence-day-no-ai-crawl-without-compensation/ ↩ ↩2

  8. Gartner, 「Gartner Predicts Search Engine Volume Will Drop 25% by 2026, Due to AI Chatbots and Other Virtual Agents」(2024-02-19). https://www.gartner.com/en/newsroom/press-releases/2024-02-19-gartner-predicts-search-engine-volume-will-drop-25-percent-by-2026-due-to-ai-chatbots-and-other-virtual-agents ↩