PerplexityBot
한 줄 정의
Perplexity가 답변 생성을 위해 운영하는 웹 크롤러로, robots.txt에서 별도로 제어할 수 있습니다.
자세히 알아보기
PerplexityBot은 Perplexity가 답변에 인용할 출처를 수집하기 위해 사용하는 크롤러입니다. Perplexity 답변에 우리 도메인이 등장하려면 이 봇의 접근이 허용돼 있어야 합니다.
robots.txt에서 'User-agent: PerplexityBot' 규칙으로 별도 제어가 가능합니다. 일반적인 브랜드 사이트는 허용하는 쪽이 자연스럽고, 차단할 경우 Perplexity 답변에서 사실상 보이지 않게 됩니다.
한 가지 유의할 점은 PerplexityBot 외에도 Perplexity-User 같은 별도 User-Agent가 있다는 사실입니다. 정책을 세울 때 봇 이름을 정확히 확인하지 않으면 의도와 다르게 차단될 수 있으니, 변경 전에는 한 번 더 점검하는 게 좋습니다.
출처
관련 용어
Perplexity
검색 결과를 답변 형태로 정리하면서 모든 문장에 출처를 다는 'Answer Engine'으로, GEO 측정의 기준 표면으로 자주 쓰입니다.
GEO·AEOGPTBot
OpenAI가 ChatGPT 학습·검색용으로 운영하는 웹 크롤러로, robots.txt를 통해 접근을 허용하거나 차단할 수 있습니다.
GEO·AEOClaudeBot
Anthropic이 Claude 학습·답변 생성을 위해 운영하는 웹 크롤러로, robots.txt를 통해 제어할 수 있습니다.
GEO·AEOGoogle-Extended
구글이 Gemini·Vertex AI 학습용으로 별도 분리해 둔 크롤러 식별자로, 일반 검색용 Googlebot과 따로 통제할 수 있습니다.
GEO·AEOllms.txt
사이트 루트에 두는 텍스트 파일로, LLM에게 '이 사이트의 핵심 콘텐츠가 어디에 있는지'를 안내하기 위해 제안된 비공식 규약입니다.