MARKETS
KOSPI
KOSDAQ
S&P 500
NASDAQ
USD/KRW
BTC
NIKKEI
WTI
KOSPI
KOSDAQ
S&P 500
NASDAQ
USD/KRW
BTC
NIKKEI
WTI
Wittgenhaus

2026년 5월 3일 일요일

전문가의 AI 하이브리드 리서치 랩

마케팅검증

AI 크롤러 방문 데이터 기반 검색 가시성 확보 전략

인공지능(AI) 크롤러의 활동 목적이 단순 색인에서 실시간 답변 생성으로 변화하고 있습니다. 이에 따라 검색 엔진 최적화 전략도 구조화된 데이터 제공 중심으로 전환해야 합니다.

2026년 4월 20일

주장인공지능(AI) 크롤러는 단순한 색인 생성을 넘어 실시간 답변 생성을 위한 콘텐츠 추출을 주된 목적으로 삼고 있습니다. 이러한 변화는 검색 엔진 최적화 전략이 기존의 인덱싱 중심에서 AI가 이해하기 쉬운 구조화된 데이터 제공으로 이동해야 함을 시사합니다.

팩트2026년 2월 기준, 총 6,890만 건의 AI 크롤러 방문이 기록되었습니다. 분석 대상 사이트 85만 8,457개 중 59%인 50만 6,910개 사이트가 최소 1회 이상의 AI 크롤러 방문을 경험했습니다. 이는 AI 크롤링이 특정 대형 사이트에 국한되지 않고 웹 전반에 걸쳐 광범위하게 발생함을 보여줍니다.

팩트전체 크롤러 활동 중 56.9%는 사용자 질의에 대응하는 실시간 답변 생성(User Fetch)으로 분류됩니다. 모델 학습(Training)은 28.8%, 콘텐츠 색인(Discovery)은 14.3%를 차지합니다. 특히 챗지피티(ChatGPT)는 실시간 답변 생성 활동의 대부분을 점유하며 AI 검색 시장을 주도합니다.

팩트오픈에이아이(OpenAI)는 8,100만 건의 방문을 기록하며 81.0%의 압도적인 점유율을 보입니다. 앤스로픽(클로드)은 16.6%, 퍼플렉시티는 1.8%, 구글(제미나이)은 0.6%의 점유율을 나타냅니다.

교차검증AI 크롤링이 활발한 사이트에서 인간 방문자가 더 많이 유입되는 경향이 있으나, 이것이 AI 크롤링이 직접적인 트래픽 상승을 유발한다는 인과관계를 증명하지는 않습니다. AI 시스템은 이미 인간 방문자가 많은 인기 사이트를 우선적으로 재방문하는 경향이 강하기 때문입니다.

팩트AI 크롤링이 허용된 사이트는 그렇지 않은 사이트보다 인간 방문자 세션이 평균 3.2배 높았습니다. 양식 작성은 2.7배, 클릭 투 콜(Click-to-call)은 2.5배 더 높은 수치를 보였습니다. 이는 AI 가시성이 실제 비즈니스 성과와 밀접하게 연관됨을 의미합니다.

팩트외부 통합 서비스인 옐트(Yext)를 사용하는 사이트는 크롤링 비율이 97.1%에 달했습니다. 이는 해당 서비스를 사용하지 않는 사이트의 58%보다 월등히 높은 수치입니다. 리뷰 통합 기능을 갖춘 사이트 역시 89.8%의 높은 크롤링 비율을 보이며 AI 시스템으로부터 신뢰할 수 있는 비즈니스로 인식됩니다.

팩트구글 비즈니스 프로필을 동기화한 사이트는 92.8%의 크롤링 비율을 기록했습니다. 로컬 스키마를 적용한 사이트도 적용하지 않은 사이트 대비 17.1%포인트 높은 크롤링 비율을 보였습니다. 기계가 읽기 쉬운 구조화된 데이터는 AI가 비즈니스 정체성을 확인하고 정보를 추출하는 데 핵심적인 역할을 합니다.

팩트콘텐츠의 양 또한 크롤링 빈도에 결정적인 영향을 미칩니다. 블로그 게시물이 50개 이상인 사이트는 그렇지 않은 사이트보다 평균 33배 더 많은 크롤러 방문을 받았습니다. 풍부한 콘텐츠는 AI가 답변을 생성할 때 참조할 수 있는 데이터 공급원으로서의 가치를 높입니다.

팩트로컬 비즈니스 스키마 필드를 10~11개 완성한 사이트는 82%의 크롤링 비율을 보였습니다. 이는 그렇지 않은 사이트의 55.2%보다 26.8%포인트 높은 수치입니다. 비즈니스 이름, 주소, 전화번호, 운영 시간 등 상세 정보를 구조화하여 제공하는 것이 AI 검색 가시성 확보의 필수 조건입니다.

출처서치 엔진 저널(Search Engine Journal)의 보도 내용을 교차 검증했습니다. (https://www.searchenginejournal.com/68-million-ai-crawler-visits-show-what-drives-ai-search-visibility/572386/)

본 기사는 전문가의 분석과 공개 자료를 기반으로 AI가 작성 후 다른 AI의 검증을 거쳐 작성됐으며 정보의 정확성과 완전성을 보장하지 않습니다. 기사 내용은 특정 투자·의사결정의 권유가 아니며, Wittgenhaus는 이를 근거로 한 행위의 결과에 책임을 지지 않습니다.

WIRE

WIRE

버블 지표

상세보기 →

릴리즈 & 논문

전체보기 →

RELEASES

vLLMv0.20.1

vLLM v0.20.1

이번 릴리즈는 v0.20.0 버전을 기반으로 하며, DeepSeek V4의 안정성 및 성능 개선에 중점을 두었습니다. 또한 여러 중요한 버그 수정이 포함되었습니다. 주요 변경 사항으로는 DeepSeek V4 모델 지원, 성능 향상을 위한 다양한 최적화, 그리고 CUDA 그래프 및 메모리 관련 버그 수정 등이 있습니다.

2시간 전

LangChainlangchain-openrouter==0.2.3

langchain-openrouter==0.2.3

langchain-openrouter 0.2.3 버전이 출시되었습니다. 스트리밍 시 분할된 `reasoning_details`를 병합하는 버그가 수정되었습니다.

1일 전

LangChainlangchain-mistralai==1.1.3

langchain-mistralai==1.1.3

이번 릴리즈에서는 MistralAI 통합에 대한 기능 개선 및 버그 수정이 포함되었습니다. 주요 변경 사항으로는 휴먼 메시지에 대한 이미지 입력 지원 추가, 모델 프로필 데이터 업데이트, 그리고 `langchain-core`의 최소 버전이 `1.2.21`로 상향 조정되었습니다. 또한, 여러 의존성 패키지가 최신 버전으로 업데이트되었습니다.

1일 전

meta-llama/llama-stackv0.8.0

v0.8.0

이번 릴리즈에서는 Anthropic Messages API를 네이티브로 지원하며, 대화 압축 기능이 추가되었습니다. 또한, 기존 Eval API 및 관련 API가 제거되었고, 문서 전반에 걸쳐 UX 개선 및 최적화가 이루어졌습니다. 보안 취약점 수정 및 CI/CD 파이프라인 개선 작업도 포함되었습니다.

1일 전

LangChainlangchain==1.3.0a1

langchain v1.3.0a1

이번 릴리즈에서는 `create_agent`에 `stream_events` 기능이 추가되었으며, HITL 미들웨어에 `respond` 결정 기능이 포함되었습니다. 또한, 에이전트 상태를 도구 디스패치에 인라인하는 것을 중단하여 성능을 개선했습니다.

1일 전

PAPERS