Claude-User란?
Claude-User는 누군가 Claude에게 웹페이지가 필요한 질문을 할 때 Anthropic이 그 페이지를 가져오는 데 쓰는 에이전트입니다. Anthropic 측은 역할이 다른 봇 세 개를 운영하며, Claude-User는 대화 속 사람을 대신해 움직이는 봇입니다. 질문에 페이지가 필요하면 그 페이지를 가져옵니다. 이를 차단하면 나에 대해 묻는 사람들을 위해 Claude 서비스가 내 페이지를 읽을 수 없습니다.
Claude-User는 무엇을 하나요?
Anthropic 측은 Claude-User가 Claude AI 사용자를 지원한다고 말합니다. 사람들이 Claude 서비스에 질문하면, 답하기 위해 웹사이트에 접근할 수 있습니다. 사이트에서 Claude-User를 비활성화하면 Anthropic 시스템이 사용자 질문에 대한 응답으로 내 콘텐츠를 가져오지 못하며, Anthropic 측은 이로 인해 사용자 주도 웹 검색에서 사이트의 가시성이 줄어들 수 있다고 말합니다(Anthropic, 2026년 4월 7일).
Claude-User는 ClaudeBot, Claude-SearchBot과 어떻게 다른가요?
Anthropic 측의 봇은 robots.txt에서 각기 다른 질문에 답합니다.
| 봇 | 역할 | 차단하면 |
|---|---|---|
| ClaudeBot | 모델 학습에 기여할 수 있는 콘텐츠를 수집 | 앞으로의 콘텐츠를 학습에서 빼 달라는 신호가 됨 |
| Claude-SearchBot | Claude 검색 결과를 개선하기 위해 콘텐츠를 색인 | Claude 검색 답변에서 가시성과 정확도가 줄어들 수 있음 |
| Claude-User | 사람의 질문에 필요할 때 페이지를 가져옴 | Claude 서비스가 그 사용자의 질문에 내 콘텐츠를 가져올 수 없음 |
Claude-User는 어떻게 허용하거나 검증하나요?
robots.txt에 이름을 지정하세요. Anthropic 측은 자사 봇이 robots.txt 지시를 따른다고 말하며, 규칙은 호스트별로 적용되므로 적용하려는 모든 하위 도메인에 추가하세요. 요청이 정말 Anthropic 측에서 온 것인지 확인하려면, 출발지 IP를 Anthropic 측이 claude.com/crawling/bots.json에 공개한 목록과 대조하세요.
# 나에 대해 묻는 사람들을 위해 Claude가 페이지를 읽도록 허용
User-agent: Claude-User
Allow: /실제 예시에서는 어떤 의미인가요?
공개된 Tesla 예시(2026년 10월 4일)에서 Claude 답변은 구매자 질문 25개에 걸쳐 인용 351건을 제시했고, 답변 11건에서 Tesla 브랜드를 언급했습니다. tesla.com 인용은 단 1건이었고, 가장 많이 인용된 사이트는 en.wikipedia.org로 16건이었습니다.
이것이 Claude 서비스가 그 질문들을 위해 읽은 페이지입니다. 내 페이지가 그 안에 들어갈 수 있는지는 Claude-User와 Claude-SearchBot이 결정하고, Claude 서비스가 실제로 그 페이지를 고르는지는 질문을 던져 측정합니다.
내 사이트에서 Claude-User는 어떻게 보나요?
Proofsource 측정에서는 Cloudflare 영역이나 액세스 로그에서 Claude-User를 포함한 AI 페처 요청을 집계하고, Anthropic 측이 공개한 IP 목록과 대조해 검증한 뒤, 각 페이지를 인용한 답변과 나란히 놓습니다. AI Traffic과 Claude 답변이 브랜드를 고르는 방식을 확인하세요.
Claude-User에 대해 자주 묻는 질문
Claude-User를 차단하면 Claude 모델이 내 사이트로 학습하지 않나요?
아닙니다. 학습은 ClaudeBot 크롤러의 일입니다. Claude-User는 사람의 질문을 위해 페이지를 가져올 뿐이므로, 차단하면 학습 데이터가 아니라 가시성을 잃습니다.
Claude-User는 robots.txt를 따르나요?
Anthropic 측은 자사 봇이 robots.txt 지시를 따른다고 말합니다. 적용하려는 각 하위 도메인에 규칙을 추가하세요.
대신 Anthropic 측의 IP 주소를 차단해야 하나요?
Anthropic 측은 그 방법에 의존하지 말라고 권합니다. IP 차단은 제대로 또는 지속적으로 작동하지 않을 수 있고, 봇이 robots.txt를 읽지 못하게 만들 수 있습니다.
Claude-User의 전체 user-agent 문자열은 무엇인가요?
Anthropic 측 문서는 토큰 이름은 밝히지만 전체 문자열은 싣지 않습니다. Claude-User 토큰으로 찾고, IP를 Anthropic 측이 공개한 목록과 대조해 검증하세요.
관련 용어
- ClaudeBot
ClaudeBot은 Anthropic의 Claude 모델 학습에 쓰일 수 있는 웹 콘텐츠를 수집하는 Anthropic의 웹 크롤러입니다.
- Claude-SearchBot
Claude-SearchBot은 Claude 검색 결과의 품질과 관련성을 높이기 위해 웹을 읽는 Anthropic의 크롤러입니다.
- robots.txt
robots.txt는 웹사이트 루트에 두는 텍스트 파일로, Robots Exclusion Protocol(RFC 9309)에 따라 크롤러가 가져갈 수 있는 경로를 알려 줍니다.
- ChatGPT-User
ChatGPT-User는 사용자의 요청 때문에 ChatGPT나 커스텀 GPT가 웹페이지를 방문할 때 OpenAI가 쓰는 에이전트입니다.
실전 예시: Tesla, 공개 AI 답변, 2026년 10월 4일: Proofsource가 Tesla를 대상으로 한 첫 스캔으로, 구매자 질문 25개와 브랜드 질문 5개를 네 엔진에 각각 한 번씩 물었습니다. 한 브랜드의 작은 표본이며, 벤치마크가 아니라 예시로 보여 드립니다.
