Crawler AI nào đọc trang web của bạn, theo Cloudflare.
Kết nối Cloudflare và Proofsource sẽ đếm các yêu cầu mà GPTBot, ClaudeBot, PerplexityBot và các crawler AI khác gửi đến trang của bạn, theo từng trang, đồng thời đánh dấu những trang chúng liên tục đọc mà không câu trả lời AI nào trích dẫn.
Cloudflare bổ sung gì
Số yêu cầu theo crawler và trang
Số yêu cầu hằng ngày từ mỗi crawler AI, theo trang, được đếm theo cách mà AI Crawl Control của chính Cloudflare đếm, nên tổng số khớp với những gì bạn thấy trong Cloudflare.
Đã được thu thập nhưng chưa bao giờ được trích dẫn
Các trang mà crawler AI đã tải ba lần trở lên nhưng chưa câu trả lời nào Proofsource theo dõi trích dẫn. Thường thì trang truy cập được nhưng không trả lời câu hỏi theo dạng mà các công cụ trích dẫn.
Các crawler giả mạo được nêu tên
Địa chỉ IP của mỗi crawler được đối chiếu với danh sách mà công ty của nó công bố. Các yêu cầu từ địa chỉ khác được gọi tên và hiển thị dưới dạng tỷ lệ đã xác minh, mà không thay đổi số đếm.
Kết nối trong ba bước
1. Mở AI Traffic Analytics
Trong Proofsource, xác nhận trang web của bạn và chọn Cloudflare. Chúng tôi kiểm tra header phản hồi của trang và chọn sẵn Cloudflare khi trang của bạn chạy sau Cloudflare.
2. Kết nối Cloudflare
Nhấp Connect with Cloudflare và phê duyệt quyền chỉ đọc vào dữ liệu phân tích; chúng tôi sẽ chọn zone của bạn. Hoặc dán Zone ID của bạn và một API token với một quyền duy nhất: Zone, Analytics, Read.
3. Kiểm tra rằng dữ liệu đã về
Proofsource tải lịch sử mà Cloudflare lưu theo gói của bạn, khoảng một tuần với gói miễn phí, rồi tự làm mới mỗi ngày một lần.
Nên biết
- API phân tích của Cloudflare báo cáo một mẫu các yêu cầu, nên số đếm là mức sàn: con số thực ít nhất bằng con số này.
- Kết nối vùng báo cáo tổng số hằng ngày. Để ghi lại từng yêu cầu kèm thời gian, đường dẫn và địa chỉ IP, hãy gửi nhật ký truy cập của bạn đến Proofsource dưới dạng log drain từ cùng thiết lập đó.
- API token của bạn được lưu ở dạng mã hóa và không bao giờ hiển thị lại. Ngắt kết nối bất cứ lúc nào trên trang Tích hợp, trong mục Nguồn crawler.
Proofsource có đọc nhật ký Cloudflare của tôi không?
Không. Kết nối một vùng sẽ đọc phân tích của Cloudflare với quyền chỉ đọc, cho số lượt yêu cầu hằng ngày theo từng crawler và trang. Chi tiết từng yêu cầu cần một log drain.
Tôi có thể xem lưu lượng crawler AI ngay trong Cloudflare ở đâu?
AI Crawl Control của Cloudflare hiển thị số yêu cầu của từng crawler AI cho zone của bạn. Proofsource đếm theo cùng cách, rồi bổ sung những trang nào trong số đó được câu trả lời AI trích dẫn.
Danh sách rút gọn đang được viết ngay lúc này.
Xem AI có nêu tên thương hiệu của bạn không, nêu tên ai thay bạn, và cần sửa gì.