API i chatgpt.com odpowiadały na te same 172 pytania kupujących
Proofsource czyta ChatGPT z jego strony bez logowania, przez scraper DataForSEO, tak jak zobaczyłby ją odwiedzający z rynku marki. Gdy ten odczyt się nie powiedzie, odpowiada API OpenAI: gpt-5-mini przez Responses API z włączonym wyszukiwaniem w sieci. Stało się tak w przypadku 428 z 5119 odpowiedzi ChatGPT między 4 a 18 października 2026 roku, wszystkich między 8 a 12 października.
To dało naturalne porównanie. Wzięliśmy każde pytanie kupującego (takie, które nie wymienia marki), na które odpowiedziało API, a chatgpt.com odpowiedział na to samo pytanie w ciągu 36 godzin. 172 pytania, 18 przestrzeni roboczych, zadawane głównie jako odwiedzający z USA lub Indii. Mediana odstępu między dwiema odpowiedziami wyniosła 24 godziny.
Doba różnicy to nie ten sam moment, a ChatGPT zmienia własne odpowiedzi z dnia na dzień. Potrzebowaliśmy więc punktu odniesienia: 813 pytań kupujących, na które chatgpt.com odpowiadał dwa dni z rzędu, a tekst się zmieniał, z 62 przestrzeni roboczych w tych samych dwóch tygodniach. Każda różnica większa niż ten punkt odniesienia wynika z kanału, a nie z kalendarza.
Odsetek wymienień marki się utrzymał: 19,8% w API, 21,5% w chatgpt.com
API wymieniło markę przy 34 ze 172 pytań. chatgpt.com wymienił ją przy 37. Obie odpowiedzi różniły się co do marki przy 19 pytaniach, czyli 11,0%, podczas gdy chatgpt.com nie zgadzał się sam ze sobą dzień później w 4,6%. API dodaje więc szum pytanie po pytaniu, ale średnio wypada blisko.
Wymieniało też więcej nazw. Odpowiedzi API wymieniały średnio 8,4 firmy wobec 6,0 w chatgpt.com, a pokrycie obu zestawów nazw wyniosło 33%, wobec 48% dla chatgpt.com w odstępie dnia. Dla konkurentów obserwowanych przez markę pokrycie wyniosło 66% wobec 76%.
Źródła się nie utrzymały: 22% witryn cytowanych przez API pojawiło się w odpowiedzi ChatGPT
172 odpowiedzi API cytowało 1047 witryn (liczonych raz na odpowiedź). Tylko 229 z nich, czyli 21,9%, było cytowanych także w odpowiedzi chatgpt.com na to samo pytanie. Gdy chatgpt.com odpowiadał ponownie następnego dnia, powtarzało się 48,6% jego witryn. Przy 40 ze 170 pytań, przy których oba coś cytowały, API i chatgpt.com nie miały ani jednej wspólnej witryny.
Inny był też ich dobór. API cytowało Reddit w 41 ze 172 odpowiedzi (23,8%, przedział 95%: od 18,1% do 30,7%), a chatgpt.com w 5 (2,9%). API cytowało Wikipedię w 12 odpowiedziach, a chatgpt.com w żadnej. Nasz scraper rejestruje obie witryny, gdy chatgpt.com je cytuje; przy tych pytaniach robił to po prostu rzadko.
API też częściej wyszukiwało, 4,5 razy na odpowiedź wobec 3,1. Długość była mniej więcej taka sama, mediana 583 słów wobec 587.
Surfer znalazł większą różnicę przy jednej odpowiedzi na kanał
Badanie Surfer, z danymi zebranymi 4 sierpnia 2026 roku, przepuściło 1000 promptów przez pięć produktów na oba sposoby. Dla ChatGPT podało 4,8% pokrycia domen i odpowiedzi API mniej więcej dwa razy dłuższe. Jak przyznaje samo badanie, każdy prompt próbkowano raz, więc część różnicy to ChatGPT, który nie zgadza się sam ze sobą.
Nasze liczby są mniej dramatyczne i wskazują ten sam kierunek. W porównaniu z punktem odniesienia z tego samego kanału odsetek wymienień marki to część, którą API oddaje mniej więcej trafnie, a lista cytowań to część, w której się myli.
O co zapytać narzędzie, zanim zaufasz jego źródłom
Cztery pytania, a dostawca powinien umieć odpowiedzieć na każde jednym zdaniem.
- Skąd pochodzi odpowiedź ChatGPT: z API czy ze strony, którą widzi odwiedzający? Pytaj o każdy silnik osobno.
- Jeśli z API, to jaki model, z włączonym czy wyłączonym wyszukiwaniem w sieci? Dokumentacja OpenAI mówi, że to model decyduje, czy wyszukiwać, a wywołujący ustawia parametry, takie jak rozmiar kontekstu wyszukiwania i filtry domen, których odwiedzający chatgpt.com nigdy nie dotyka.
- Czy odpowiedź zastępcza jest oznaczona? Wykres łączący dwa kanały ukrywa przełączenie.
- Jeśli musisz, używaj danych z API do orientacyjnego odsetka wzmianek. Nie buduj z jego cytowań listy do outreachu.
Jak radzi sobie z tym Proofsource
Każda zapisana odpowiedź zachowuje model, który ją napisał, a widok odpowiedzi go pokazuje, więc odpowiedź zastępcza jest oznaczona jako gpt-5-mini, zamiast udawać chatgpt.com. Te odpowiedzi zastępcze wliczają się do liczb ChatGPT z dni, w których działały, i dlatego zmierzyliśmy, jak bardzo odbiegają.
Gdzie możemy się mylić
Strona API to jeden model z naszymi ustawieniami: gpt-5-mini, niski poziom rozumowania, mały kontekst wyszukiwania. Narzędzie wywołujące większy model albo z innymi ustawieniami może wypaść bliżej lub dalej.
API działało tylko wtedy, gdy zawiódł scraper, w przypadku tych par 8 i 9 października. Jeśli te awarie dotyczyły konkretnych pytań, pary nie są losową próbą. Punkt odniesienia pochodzi z szerszego zbioru przestrzeni roboczych; po zawężeniu do tych samych 18 wciąż dawał 31,7% pokrycia witryn i 44,2% pokrycia nazw.
chatgpt.com przeszedł z GPT-5.6 na GPT-6 8 października, więc 41 ze 172 odpowiedzi chatgpt.com pochodziło z nowszego modelu. Pokrycie było podobne po obu stronach zmiany.
Witryny porównujemy według domeny, więc dwie różne strony z tej samej witryny liczą się jako zgodne. Pokrycie na poziomie stron byłoby niższe. Nazwy i cytowania pochodzą z naszej własnej ekstrakcji, a pominięcie liczy się tak samo w obu kanałach.
