Jak Proofsource mierzy widoczność w AI.
Proofsource mierzy widoczność w AI jako odsetek prawdziwych odpowiedzi AI, które wymieniają twoją markę, na pytania zadane tak, jak zadają je twoi kupujący, w ChatGPT, Perplexity, Claude i Google AI Overviews. Każdy odsetek ma 95-procentowy przedział Wilsona, każda liczba otwiera się do stojących za nią odpowiedzi, a liczby, których nie możemy jeszcze podeprzeć wystarczającymi dowodami, są wstrzymywane, a nie szacowane.
Trzy zasady stojące za każdą liczbą
Przedział Wilsona przy każdym procencie, żebyś widział, jak daleko prawdziwy wskaźnik może być od zmierzonego.
Wilson (1927), standardowy przedział dla proporcjisilniki, którym zadano te same pytania: ChatGPT, Perplexity, Claude i Google AI Overviews.
Każdy plan, także bezpłatny okres próbnyliczb otwiera odpowiedzi, które za nimi stoją, z pełnym tekstem i każdą stroną cytowaną przez każdy silnik.
Każdy raport, w każdym planieCo liczy Proofsource?
- Wskaźnik wzmianek: odsetek odpowiedzi na pytanie, które wymieniają Twoją markę, dla każdego silnika i łącznie.
- Kto jest wymieniany zamiast Ciebie: każda inna marka w tych samych odpowiedziach, uszeregowana według częstotliwości.
- Pozycja: miejsce w odpowiedzi, w którym pojawia się Twoja marka, gdy jest wymieniona.
- Cytowania: strony internetowe, które każdy silnik podaje jako źródła, i które z nich wspominają o Tobie.
Każda odpowiedź jest zachowana z pełną treścią i źródłami, więc każdą liczbę można prześledzić do odpowiedzi, które zlicza. Pojęcia wyjaśnia słownik widoczności w AI.
Jak zadawane są pytania?
Zatwierdzasz zestaw pytań kupujących: pytania kategoryjne bez nazwy marki, takie jak „jakie jest najlepsze narzędzie do X”, plus kilka pytań z nazwą twojej marki. Każde z nich jest zadawane na każdym silniku z zestawu, tak samo sformułowane, żeby silniki można było porównać.
W planie codziennym każde pytanie jest zadawane raz dziennie w każdym silniku; plany tygodniowe i miesięczne działają rzadziej. Bezpłatny okres próbny obejmuje 2 skany, dziś i jutro, z 25 pytaniami w każdym silniku. Prawdziwym testem są pytania bez nazwy marki: pytanie, które zawiera nazwę Twojej marki, wspomni ją niezależnie od tego, czy silnik wie, kim jesteś.
Na ile pewna jest każda liczba?
Silnik AI może dać dwie różne odpowiedzi na to samo pytanie w odstępie minuty, więc jedna odpowiedź to próbka, a nie fakt. Odsetek zbudowany na garści odpowiedzi może być daleko od prawdziwego wskaźnika.
Proofsource dodaje 95-procentowy przedział Wilsona do każdego odsetka. Wymienienie w 6 z 20 odpowiedzi to 30%, z przedziałem od około 14,5% do 51,9%. Wymienienie w 60 z 200 to również 30%, ale przedział zawęża się do około 24,1% do 36,7%. Zawęża go codzienne próbkowanie, a zmiana jest sygnalizowana dopiero, gdy przekracza przedział.
Przedział Wilsona wprowadzono w 1927 roku (Wilson, Journal of the American Statistical Association) i jest standardowym wyborem dla proporcji z małej próby, bo pozostaje rzetelny w pobliżu 0% i 100%. Co oznacza prostymi słowami, wzór i publikacje, które go zalecają: Co oznacza przedział 95%.
Jak obliczane są główne wyniki?
Każdy raport pokazuje jeden wynik na obszar, od 0 do 100. Każdy to średnia ważona zmierzonych składników. Składnik, którego nie udało się zmierzyć, jest pomijany i nazywany, nigdy nie liczy się jako zero. Przy zbyt małej liczbie dowodów wynik brzmi „za mało danych”.
Wynik techniczny
Wzór. round( suma(waga x wynik obszaru) / suma(wag zmierzonych obszarów) ), każdy wynik obszaru = round(100 x (zaliczone + 0,5 x ostrzeżenia) / rozstrzygnięte testy)
- Skanowanie i indeksowanie (waga 25). Wynik obszaru z audytu witryny. Brama wejściowa: strona, której nie da się pobrać, skanonizować ani zaindeksować, nie może się pozycjonować ani być cytowana.
- Linki i architektura (waga 10). Wynik obszaru z audytu witryny. Linki wewnętrzne decydują, do których stron docierają crawlery; zepsuty link kosztuje mniej niż strona, której nie da się zaindeksować.
- Dane strukturalne i udostępnianie (waga 15). Wynik obszaru z audytu witryny. Jak maszyny czytają stronę bez zgadywania.
- Wydajność (waga 15). Wynik obszaru z audytu witryny. Szybkość i Core Web Vitals bezpośrednio wpływają na pozycje i porzucenia, i są mierzone.
- Bezpieczeństwo i zaufanie (waga 10). Wynik obszaru z audytu witryny. Podstawa zaufania, którą spełnia większość witryn, więc odróżnia niewiele z nich.
- On-page i treść (waga 15). Wynik obszaru z audytu witryny. Tytuły, opisy, nagłówki i treść to to, po czym dopasowuje się stronę.
- Dostęp dla wyszukiwania AI (waga 10). Wynik obszaru z audytu witryny. Czy crawlery AI mogą czytać witrynę i czy istnieje llms.txt.
Brakujące dane. Obszar z mniej niż 3 rozstrzygniętymi testami jest pomijany, a wagi są normalizowane od nowa. Gdy zmierzono mniej niż 60 ze 100 punktów wagi albo brakuje skanowania i indeksowania, raport podaje, że danych jest za mało, i nie pokazuje wyniku.
Niepewność. Audyt to pełny spis zeskanowanych stron, a nie próba, więc nie ma przedziału z próby. Zakres to granica deterministyczna: wynik, gdyby każdy nierozstrzygnięty test nie przeszedł, i gdyby każdy przeszedł.
Wynik SEO
Wzór. round( suma(waga x wynik części) / suma(wag zmierzonych części) ), tylko zmierzone części
- Widoczność w wyszukiwarce: słowa kluczowe z pozycją (waga 10). log10(1 + słowa kluczowe z pozycją), 10 000 słów kluczowych daje 100. Jak szeroko witryna jest znajdowana; skala logarytmiczna.
- Widoczność w wyszukiwarce: przedziały pozycji (waga 15). Średnia waga kliknięć słów kluczowych z pozycją według przedziału pozycji, 0,25 daje 100. Jak wysoko witryna się pozycjonuje tam, gdzie jest znajdowana.
- Widoczność w wyszukiwarce: szacowane miesięczne wizyty (waga 20). log10(1 + szacowane wizyty), 100 000 daje 100. Efekt pozycjonowania; szacunek dostawcy.
- Autorytet: domeny odsyłające wobec wskazanych konkurentów (waga 25). 50 x domeny odsyłające marki / mediana wskazanych konkurentów, maksymalnie 100. Linki to najsilniejszy sygnał off-page, oceniany względem konkurentów wskazanych przez klienta.
- On-page (waga 20). Wynik obszaru on-page i treść z audytu witryny. To, co witryna kontroluje w tym, jak strona jest dopasowywana do zapytania.
- Jakość treści (waga 10). Średni zweryfikowany wynik od oceniającego jakość stron, tylko gdy istnieje pełne uruchomienie. Opcjonalna ocena LLM na próbie stron, najmniej deterministyczne wejście.
Brakujące dane. Część, której nie zmierzono, jest pomijana, nigdy szacowana, a reszta jest normalizowana od nowa. Bez zmierzonej części widoczności w wyszukiwarce albo poniżej 50 ze 100 punktów wagi raport podaje, że danych jest za mało.
Niepewność. Pozycje, ruch i liczby backlinków to szacunki dostawców z danego momentu, więc żaden przedział z próby nie jest liczony ani sugerowany. Każda część pokazuje swoje źródło i datę stanu.
Wynik AEO
Wzór. round( (35 x wzmianka + 25 x cytowanie + 25 x udział w rozmowie + 15 x pozycja) / 100 ), każda część w skali 0-100, tylko zmierzone części
- Wskaźnik wzmianek (waga 35). Odsetek odpowiedzi wymieniających markę, 50% daje 100. Pierwsze, czego potrzebuje kupujący; każdy inny składnik tego wymaga.
- Wskaźnik cytowań (waga 25). Odsetek odpowiedzi cytujących witrynę marki, 40% daje 100. Mierzalny krok od widoczności do ruchu.
- Udział w rozmowie (ramka top 10) (waga 25). Udział marki wśród dziesięciu najczęściej wymienianych dostawców, 25% daje 100. Jak marka wypada na tle dostawców wymienionych obok niej.
- Średnia pozycja, gdy marka jest wymieniona (waga 15). 100 x (20 - miejsce) / 19, miejsce 1 daje 100. Wcześniejsze miejsce jest czytane jako pierwsze; ma najmniejszą wagę, bo opiera się na najmniejszej liczbie odpowiedzi.
Brakujące dane. Mniej niż 10 odpowiedzi: za mało danych, brak wyniku. Udział w rozmowie wymaga 10 wzmianek o dostawcach, a pozycja 5 odpowiedzi z wymienioną marką i miejscem; w przeciwnym razie ta część jest pomijana, a reszta normalizowana od nowa.
Niepewność. Odpowiedzi są próbkowane, więc wynik jest pokazywany z zakresem 95% wyznaczonym z przedziałów Wilsona jego wskaźników (Monte Carlo, stałe ziarno, ostrożne założenie zależności), wraz z wynikiem przy pięciu alternatywnych wagach, żeby było widać wpływ wag.
Jak trafny jest klasyfikator wzmianek o marce?
Precyzja, czułość i dokładność klasyfikatora, który decyduje, czy odpowiedź wymienia twoją markę, dla każdego silnika, mierzone względem etykiet nadanych przez ludzi. Każda etykieta wskazuje prawdziwą zapisaną odpowiedź, a bieżący werdykt klasyfikatora jest dołączany ponownie w chwili tworzenia raportu.
Każdy werdykt jest sprawdzany z odpowiedziami oznaczonymi przez ludzi, dla każdego silnika osobno. Liczba trafia tutaj dopiero wtedy, gdy jej oznaczony zbiór przekroczy minimalną liczebność, więc każda liczba ma wystarczające dowody, by się obronić.
Precyzję i czułość mierzy się względem złotych zbiorów oznaczonych przez ludzi, warstwowanych według silnika, tematu i marki. Każda etykieta odnosi się do prawdziwej zapisanej odpowiedzi; BIEŻĄCY werdykt klasyfikatora jest dołączany ponownie w chwili tworzenia raportu, więc zmiana modelu lub promptu jest widoczna bez ponownego oznaczania. Liczby poniżej minimalnej liczby etykiet nie są publikowane.
Te dane są generowane na nowo z ostatniego oznaczonego uruchomienia przed każdym wdrożeniem.
Jakie są ograniczenia tej metody?
- Srebrne etykiety pomagają zbudować wstępną zgodność, ale nie są prawdą sprawdzoną przez ludzi; są nią tylko liczby ze złotych zbiorów na tej stronie.
- Wydźwięk to wskaźnik zgodności dla 3 klas, a nie precyzja/czułość dla każdej klasy.
- Silniki są próbkowane w podanych wersjach modeli; cicha zmiana modelu przez dostawcę może przesunąć liczby, zanim odnotuje ją kolejne uruchomienie kalibracji.
- Czas do cytowania mierzy się tylko dla stron kontrolowanych przez Proofsource (sondy z unikalnym tokenem), a nie dla dowolnych stron klientów.
O co ludzie pytają w sprawie metod pomiaru Proofsource
Jak Proofsource mierzy widoczność w AI?
Zadaje ChatGPT, Perplexity, Claude i Google AI Overviews pytania, które zadają twoi kupujący, czyta każdą odpowiedź i zapisuje, czy twoja marka została wymieniona, obok kogo i które strony są cytowane. Wskaźnik wzmianek to odsetek odpowiedzi, które cię wymieniają, a każdy wskaźnik ma 95-procentowy przedział Wilsona.
Jak często zadawane są pytania?
Tak często, jak wybiera plan: codziennie lub co tydzień, raz na pytanie na silnik przy każdym uruchomieniu. Bezpłatny okres próbny obejmuje 2 skany, dziś i jutro, po 25 pytań na każdym silniku.
Po co przedział przy każdej liczbie?
Bo na to samo pytanie minutę później można dostać inną odpowiedź. Wskaźnik wzmianek z 20 odpowiedzi może być daleko od prawdziwego; przedział pokazuje, jak daleko. Proofsource sygnalizuje zmianę dopiero wtedy, gdy przekroczy przedział, więc rozchwiany dzień nie jest raportowany jako trend.
Jak trafny jest klasyfikator wzmianek o marce?
Jego precyzja i czułość są mierzone względem odpowiedzi oznaczonych przez ludzi, dla każdego silnika, i publikowane na tej stronie, gdy oznaczony zbiór będzie wystarczająco duży, by wynik był rzetelny. Do tego czasu liczby są wstrzymane, a nie szacowane.
Czy mogę sprawdzić odpowiedzi stojące za liczbą?
Tak. Każda liczba otwiera odpowiedzi, z których ją policzono, z pełną treścią i źródłami cytowanymi przez każdy silnik, więc możesz przeliczyć ją sam.
Zobacz własne liczby, z przedziałami.
Zobacz, które pytania kupujących wymieniają twoją markę, kto jest wymieniany zamiast niej i co naprawić. 200 odpowiedzi. 25 Prompts/pytanie. Najlepsze silniki AI. 2 dni. Za darmo. Bez karty.
Google AI OverviewsGoogle AI Mode
