[AI 전환 커머스 ④] AI 크롤러 봇을 보는 이커머스 플랫폼: 적극 열거나, 막거나

AI 요약

AI가 검색창을 열고, 상품을 고르고, 결제 버튼을 누르는 등 소비자 클릭을 대신하는 AI 쇼핑 에이전트가 커머스 판도를 바꿀 것이라는 전망이 정설로 굳어지고 있습니다. 글로벌 커머스 인텔리전스 기업 크리테오의 ‘2026 커머스와 AI 트렌드 리포트’에 따르면 한국 소비자의 40% 이상이 상품 비교·발견 채널로 AI 서비스를 활용하고 있고, 어센트AI 박세용 대표는 LLM 기반 AI 대화형 서비스로부터의 평균 유입량이 8~10%가량 증가하는 추세라고 밝혔습니다. 이에 이커머스 플랫폼들은 robots.txt를 통해 AI 크롤러를 개방하거나 차단하는 등 다양한 대응을 보였으며, 무신사는 크롤러를 3단계로 분류해 검색 응답용은 허용·학습용은 개인화 영역 차단, 롯데온은 검색 응답용에 3초·학습용에 5초 대기 시간 설정, CJ올리브영은 명시적 크롤러 목록과 5초 대기 시간 적용, 퀸잇은 AI 크롤러를 전면 허용하는 식의 사례가 나타났습니다.