로그 파일 분석
한 줄 정의
서버 액세스 로그를 직접 들여다보며 검색·AI 봇이 우리 사이트를 어떻게 크롤하는지 정량적으로 파악하는 진단 기법입니다.
자세히 알아보기
Log File Analysis는 nginx·Apache·CDN 같은 서버에서 떨어지는 액세스 로그를 분석하는 작업입니다. 다른 SEO 도구가 추정으로 이야기하는 '봇이 어떻게 다니는지'를 추정 없이 그대로 볼 수 있다는 점에서, 큰 사이트에선 거의 필수에 가깝습니다.
실무에서 자주 잡아내는 인사이트는 세 가지 정도입니다. 첫째, Googlebot이 정작 중요한 카테고리는 잘 안 들르고 페싯 URL만 도느라 크롤 예산을 낭비하는 패턴. 둘째, 5xx·40x가 특정 시간대에 몰리는 인프라 이슈. 셋째, 사라진 줄 알았던 옛날 URL을 봇이 여전히 두드리는 케이스입니다.
AI 검색이 늘면서 GPTBot·PerplexityBot·ClaudeBot의 트래픽도 함께 봅니다. 어떤 봇이 어느 페이지를 자주 방문하는지가 곧 '어떤 콘텐츠가 인용 후보로 잡히고 있는가'의 단서가 되기 때문에, 로그는 GEO 측정에도 점점 더 중요해지고 있습니다.
관련 용어
패싯 내비게이션
필터·정렬·옵션 조합으로 같은 카탈로그에서 폭증하는 URL을 만들어내는 구조로, 잘못 다루면 인덱스 비대화의 주범이 됩니다.
SEO인덱스 비대화
저가치·중복 URL이 검색 인덱스에 과다하게 올라간 상태로, 사이트 전체의 평균 품질을 떨어뜨려 랭킹에 악영향을 줍니다.
SEO자바스크립트 SEO
JS로 렌더링되는 페이지가 봇에게도 정상적으로 인덱스되도록 SSR·prerender·hydration 전략을 설계하는 영역입니다.
SEO인덱서빌리티
크롤된 페이지가 검색 인덱스에 실제로 저장될 수 있는 자격으로, 'crawlable이지만 indexable이 아닌' 페이지가 흔합니다.
GEO·AEOGPTBot
OpenAI가 ChatGPT 학습·검색용으로 운영하는 웹 크롤러로, robots.txt를 통해 접근을 허용하거나 차단할 수 있습니다.
우리 브랜드는 AI 답변에 어떻게 등장하고 있을까요?
Villion은 ChatGPT·Perplexity·AI Overview에서 브랜드 인용 현황을 진단하고, 인용률과 언급 점유율을 끌어올리는 작업을 자동화합니다.
무료 진단 받기