Cách Proofsource đo lường mức độ hiển thị trên AI.
Proofsource đo mức độ hiển thị trên AI bằng tỷ lệ câu trả lời AI thật có nêu tên thương hiệu của bạn, được hỏi theo cách người mua của bạn hỏi, trên ChatGPT, Perplexity, Claude và Google AI Overviews. Mọi tỷ lệ phần trăm đều kèm khoảng Wilson 95%, mọi con số đều mở ra các câu trả lời đằng sau, và những số liệu chưa đủ bằng chứng sẽ được giữ lại, không ước tính.
Ba quy tắc đằng sau mọi con số
Khoảng tin cậy Wilson trên mọi tỷ lệ phần trăm, để bạn thấy tỷ lệ thật có thể cách tỷ lệ đo được bao xa.
Wilson (1927), khoảng tin cậy tiêu chuẩn cho một tỷ lệcông cụ được hỏi cùng các câu hỏi: ChatGPT, Perplexity, Claude và Google AI Overviews.
Mọi gói, kể cả bản dùng thử miễn phícon số mở ra được các câu trả lời đằng sau, với toàn văn và mọi trang mà từng công cụ đã trích dẫn.
Mọi báo cáo, trên mọi góiProofsource đếm những gì?
- Tỷ lệ nhắc đến: phần câu trả lời cho một câu hỏi có nêu tên thương hiệu của bạn, theo từng công cụ và tổng thể.
- Ai được nêu tên thay cho bạn: mọi thương hiệu khác trong cùng các câu trả lời, xếp theo tần suất xuất hiện.
- Vị trí: thương hiệu của bạn xuất hiện ở đâu trong câu trả lời khi được nêu tên.
- Trích dẫn: các trang web mỗi công cụ liệt kê làm nguồn, và trang nào trong đó nhắc đến bạn.
Mọi câu trả lời được giữ nguyên văn kèm nguồn, nên mỗi con số đều có thể truy ngược về các câu trả lời mà nó đếm. Các thuật ngữ được định nghĩa trong bảng thuật ngữ mức độ hiển thị trên AI.
Các câu hỏi được hỏi như thế nào?
Bạn phê duyệt một bộ câu hỏi của người mua: các câu hỏi danh mục không có thương hiệu như "công cụ tốt nhất cho X là gì", cộng thêm vài câu hỏi có nêu tên thương hiệu của bạn. Mỗi câu được hỏi trên mọi công cụ trong bảng, viết giống nhau trên mỗi công cụ, để các công cụ có thể so sánh với nhau.
Với gói hằng ngày, mọi câu hỏi chạy một lần mỗi ngày trên mỗi công cụ; gói hằng tuần và hằng tháng chạy ít hơn. Bản dùng thử miễn phí chạy 2 lượt quét, hôm nay và ngày mai, với 25 câu hỏi trên mỗi công cụ. Câu hỏi không có tên thương hiệu mới là phép thử thật: một câu hỏi nêu tên thương hiệu của bạn sẽ nhắc đến nó dù công cụ có biết bạn là ai hay không.
Mỗi con số chắc chắn đến đâu?
Một công cụ AI có thể đưa ra hai câu trả lời khác nhau cho cùng một câu hỏi chỉ cách nhau một phút, nên một câu trả lời chỉ là một mẫu, không phải sự thật. Một tỷ lệ phần trăm dựa trên vài câu trả lời có thể cách rất xa tỷ lệ thật.
Proofsource đặt khoảng Wilson score 95% trên mọi tỷ lệ phần trăm. Được nêu tên trong 6 trên 20 câu trả lời là 30%, với khoảng từ khoảng 14,5% đến 51,9%. Được nêu tên trong 60 trên 200 cũng là 30%, nhưng khoảng thu hẹp còn khoảng 24,1% đến 36,7%. Lấy mẫu hằng ngày là thứ thu hẹp khoảng này, và thay đổi chỉ được đánh dấu khi vượt khỏi khoảng.
Khoảng Wilson được giới thiệu năm 1927 (Wilson, Journal of the American Statistical Association) và là lựa chọn chuẩn cho một tỷ lệ từ mẫu nhỏ vì nó vẫn trung thực khi gần 0% và 100%. Ý nghĩa bằng lời đơn giản, công thức, và các bài báo khuyến nghị nó: Ý nghĩa của khoảng tin cậy 95%.
Các điểm số chính được tính thế nào?
Mỗi báo cáo hiển thị một điểm cho mỗi lĩnh vực, từ 0 đến 100. Mỗi điểm là trung bình có trọng số của các phần được đo. Phần nào chúng tôi không đo được sẽ bị bỏ ra và được nêu tên, không bao giờ tính là 0. Khi có quá ít bằng chứng, điểm sẽ hiển thị “chưa đủ dữ liệu”.
Điểm kỹ thuật
Công thức. round( tổng(trọng số x điểm khu vực) / tổng(trọng số các khu vực được đo) ), mỗi điểm khu vực = round(100 x (đạt + 0,5 x cảnh báo) / số kiểm tra xác định được)
- Thu thập và lập chỉ mục (trọng số 25). Điểm khu vực từ kiểm tra trang web. Cửa chặn: một trang không thể tải, chuẩn hóa canonical hoặc lập chỉ mục thì không thể xếp hạng hay được trích dẫn.
- Liên kết và cấu trúc (trọng số 10). Điểm khu vực từ kiểm tra trang web. Liên kết nội bộ quyết định crawler đến được những trang nào; một liên kết hỏng gây hại ít hơn một trang không thể lập chỉ mục.
- Dữ liệu có cấu trúc và chia sẻ (trọng số 15). Điểm khu vực từ kiểm tra trang web. Cách máy đọc trang mà không phải đoán.
- Hiệu suất (trọng số 15). Điểm khu vực từ kiểm tra trang web. Tốc độ và Core Web Vitals ảnh hưởng trực tiếp đến thứ hạng và tỷ lệ bỏ trang, và được đo.
- Bảo mật và độ tin cậy (trọng số 10). Điểm khu vực từ kiểm tra trang web. Một mức nền về độ tin cậy mà hầu hết trang web đều đạt, nên nó chỉ phân biệt được ít trang.
- On-page và nội dung (trọng số 15). Điểm khu vực từ kiểm tra trang web. Tiêu đề, mô tả, đề mục và nội dung chính là những gì một trang được đối chiếu.
- Quyền truy cập của tìm kiếm AI (trọng số 10). Điểm khu vực từ kiểm tra trang web. Crawler AI có được đọc trang web không và có tệp llms.txt không.
Dữ liệu thiếu. Khu vực có ít hơn 3 kiểm tra xác định được sẽ bị loại và trọng số được chuẩn hóa lại. Dưới 60 trên 100 điểm trọng số được đo, hoặc không có thu thập và lập chỉ mục, báo cáo ghi là không đủ dữ liệu và không hiển thị điểm.
Độ bất định. Một lần kiểm tra là thống kê toàn bộ các trang đã thu thập, không phải mẫu, nên không có khoảng lấy mẫu. Khoảng này là một giới hạn tất định: điểm nếu mọi kiểm tra chưa xác định đều không đạt, và nếu tất cả đều đạt.
Điểm SEO
Công thức. round( tổng(trọng số x điểm thành phần) / tổng(trọng số các thành phần được đo) ), chỉ các thành phần được đo
- Mức độ hiển thị tìm kiếm: số từ khóa có thứ hạng (trọng số 10). log10(1 + số từ khóa có thứ hạng), 10.000 từ khóa đạt 100. Trang web được tìm thấy rộng đến đâu; thang log.
- Mức độ hiển thị tìm kiếm: nhóm thứ hạng (trọng số 15). Trọng số nhấp trung bình của các từ khóa có thứ hạng theo nhóm vị trí, 0,25 đạt 100. Trang web xếp hạng tốt đến đâu ở nơi nó được tìm thấy.
- Mức độ hiển thị tìm kiếm: lượt truy cập ước tính hằng tháng (trọng số 20). log10(1 + lượt truy cập ước tính), 100.000 đạt 100. Kết quả của việc xếp hạng; một ước tính của nhà cung cấp.
- Uy tín: tên miền giới thiệu so với các đối thủ được nêu tên (trọng số 25). 50 x tên miền giới thiệu của thương hiệu / trung vị của các đối thủ được nêu tên, tối đa 100. Liên kết là tín hiệu off-page mạnh nhất, được đánh giá so với các đối thủ mà khách hàng nêu tên.
- On-page (trọng số 20). Điểm khu vực on-page và nội dung từ kiểm tra trang web. Những gì trang web kiểm soát về cách một trang được đối chiếu với một truy vấn.
- Chất lượng nội dung (trọng số 10). Điểm trung bình đã xác minh từ bộ chấm chất lượng trang, chỉ khi có một lượt chạy hoàn chỉnh. Một đánh giá LLM tùy chọn trên một mẫu trang, đầu vào ít tất định nhất.
Dữ liệu thiếu. Một thành phần không được đo sẽ bị loại, không bao giờ đoán, và phần còn lại được chuẩn hóa lại. Không có thành phần mức độ hiển thị tìm kiếm được đo, hoặc dưới 50 trên 100 điểm trọng số, báo cáo ghi là không đủ dữ liệu.
Độ bất định. Thứ hạng, lưu lượng và số backlink là ước tính của nhà cung cấp tại một thời điểm, nên không tính hay ngụ ý khoảng lấy mẫu nào. Mỗi thành phần hiển thị nguồn và ngày tham chiếu.
Điểm AEO
Công thức. round( (35 x nhắc đến + 25 x trích dẫn + 25 x thị phần thảo luận + 15 x vị trí) / 100 ), mỗi thành phần trên thang 0-100, chỉ các thành phần được đo
- Tỷ lệ nhắc đến (trọng số 35). Tỷ lệ câu trả lời nêu tên thương hiệu, 50% đạt 100. Điều đầu tiên người mua cần; mọi thành phần khác đều đòi hỏi nó.
- Tỷ lệ trích dẫn (trọng số 25). Tỷ lệ câu trả lời trích dẫn trang web của thương hiệu, 40% đạt 100. Bước đo được từ mức độ hiển thị đến lưu lượng.
- Thị phần thảo luận (khung top 10) (trọng số 25). Tỷ lệ của thương hiệu trong mười nhà cung cấp được nêu tên nhiều nhất, 25% đạt 100. Thương hiệu so sánh thế nào với các nhà cung cấp được nêu tên bên cạnh.
- Vị trí trung bình khi được nêu tên (trọng số 15). 100 x (20 - vị trí) / 19, vị trí số 1 đạt 100. Vị trí sớm hơn được đọc trước; có trọng số thấp nhất vì dựa trên ít câu trả lời nhất.
Dữ liệu thiếu. Ít hơn 10 câu trả lời: không đủ dữ liệu, không có điểm. Thị phần thảo luận cần 10 lượt nhắc đến nhà cung cấp và vị trí cần 5 câu trả lời có nêu tên kèm thứ tự, nếu không thành phần đó bị loại và phần còn lại được chuẩn hóa lại.
Độ bất định. Câu trả lời được lấy mẫu, nên điểm được hiển thị với khoảng 95% từ các khoảng tin cậy Wilson của các tỷ lệ (Monte Carlo, seed cố định, giả định phụ thuộc thận trọng), cùng điểm theo năm cách gán trọng số thay thế để thấy rõ tác động của trọng số.
Bộ phân loại lượt nhắc đến thương hiệu chính xác đến mức nào?
Độ chính xác (precision), độ phủ (recall) và độ đúng của bộ phân loại quyết định một câu trả lời có nêu tên thương hiệu của bạn hay không, theo từng công cụ AI, đo với nhãn do con người gán. Mỗi nhãn trỏ đến một câu trả lời thật đã thu thập, và kết luận hiện tại của bộ phân loại được ghép lại khi lập báo cáo.
Mọi kết luận đều được đối chiếu với các câu trả lời do con người gán nhãn, theo từng công cụ. Một con số chỉ được công bố ở đây khi bộ dữ liệu đã gán nhãn của nó vượt số lượng tối thiểu, để mỗi con số đều có đủ bằng chứng làm chỗ dựa.
Precision và recall được đo dựa trên các bộ gold set do con người gán nhãn, phân tầng theo công cụ, chủ đề và thương hiệu. Mỗi nhãn tham chiếu đến một câu trả lời thực đã được thu thập; kết luận HIỆN TẠI của bộ phân loại được ghép lại tại thời điểm lập báo cáo, nên một thay đổi về mô hình hoặc prompt được phản ánh mà không cần gán nhãn lại. Các số liệu dưới số nhãn tối thiểu sẽ không được hiển thị.
Các số liệu này được tạo lại từ lượt chạy đã gắn nhãn mới nhất trước mỗi lần triển khai.
Phương pháp này có những giới hạn gì?
- Nhãn silver giúp khởi tạo mức đồng thuận nhưng không phải sự thật đã được con người xác minh; chỉ các số liệu gold set trên trang này mới là như vậy.
- Cảm xúc là số liệu đồng thuận 3 lớp, không phải precision/recall theo từng lớp.
- Các công cụ được lấy mẫu với các phiên bản mô hình được liệt kê; việc nhà cung cấp âm thầm thay mô hình có thể làm thay đổi số liệu trước khi lượt hiệu chỉnh tiếp theo ghi nhận.
- Thời gian đến khi được trích dẫn chỉ được đo cho các trang do Proofsource kiểm soát (thăm dò bằng token duy nhất), không áp dụng cho trang bất kỳ của khách hàng.
Mọi người hỏi gì về cách Proofsource đo lường
Proofsource đo mức độ hiển thị trên AI thế nào?
Công cụ hỏi ChatGPT, Perplexity, Claude và Google AI Overviews những câu hỏi người mua của bạn đặt ra, đọc mọi câu trả lời và ghi lại thương hiệu của bạn có được nêu tên không, bên cạnh ai, và trang nào được trích dẫn. Tỷ lệ nhắc đến là tỷ lệ câu trả lời nêu tên bạn, và mỗi tỷ lệ đi kèm khoảng tin cậy Wilson 95%.
Các câu hỏi được hỏi bao lâu một lần?
Tùy tần suất gói chọn: hằng ngày hoặc hằng tuần, mỗi câu hỏi được hỏi một lần trên mỗi công cụ ở mỗi lượt chạy. Bản dùng thử miễn phí chạy 2 lượt quét (hôm nay và ngày mai), với 25 câu hỏi trên mỗi công cụ.
Vì sao phải đặt khoảng tin cậy cho mọi con số?
Vì cùng một câu hỏi có thể nhận câu trả lời khác chỉ một phút sau. Tỷ lệ nhắc đến từ 20 câu trả lời có thể cách xa tỷ lệ thật; khoảng tin cậy cho thấy xa đến đâu. Proofsource chỉ đánh dấu một thay đổi khi nó vượt khỏi khoảng tin cậy, để một ngày nhiễu không bị báo cáo thành xu hướng.
Bộ phân loại lượt nhắc đến thương hiệu chính xác đến mức nào?
Độ chính xác và độ phủ của nó được đo so với các câu trả lời do con người gắn nhãn, theo từng công cụ, và được công bố trên trang này khi bộ dữ liệu gắn nhãn đủ lớn để trung thực. Trước đó, các số liệu được giữ lại thay vì ước tính.
Tôi có thể kiểm tra các câu trả lời đằng sau một con số không?
Có. Mọi con số đều mở ra các câu trả lời mà nó được tính từ đó, kèm toàn văn và các nguồn mỗi công cụ đã trích dẫn, để bạn tự đếm lại.
Xem các con số của chính bạn, kèm khoảng tin cậy.
Xem câu hỏi nào của người mua nêu tên thương hiệu của bạn, ai được nêu tên thay bạn, và cần sửa gì. 200 câu trả lời. 25 Prompts/câu hỏi. Các công cụ AI hàng đầu. 2 ngày. Miễn phí. Không cần thẻ.
Google AI OverviewsGoogle AI Mode
