Dua pertiga jawaban ChatGPT kami tidak pernah mencari di web
Cari tahu mengapa ChatGPT tidak mau menyebut merek Anda dan Anda akan mendapat daftar yang seragam: bangun otoritas, masuk ke artikel rangkuman yang dipercayainya. Setiap butir berasumsi model membaca sesuatu tentang kategori Anda dan menempatkan Anda di bawah pihak lain. Sering kali model itu tidak membaca apa pun.
Antara 22 Agustus dan 1 Oktober 2026, kami menilai 364 jawaban lengkap yang kedua sisinya bisa kami cek: merek mana yang disebut jawaban, dan halaman mana yang dikutipnya. Empat merek di tiga akun dalam kategori perangkat lunak B2B yang berdekatan, pada dua mesin yang mengembalikan kutipan: Google AI Overviews, dan mesin ChatGPT kami, yang memanggil API OpenAI dengan alat pencarian web terpasang. Ini irisan yang sempit, jadi baca setiap angka di sini sebagai milik kami.
- 226 jawaban berasal dari mesin ChatGPT, dan 215 di antaranya menyimpan jumlah pencarian web yang dijalankan model.
- 147 dari 215 menjalankan nol pencarian, jadi tidak ada yang diambil sama sekali. Itu 68%.
- 68 menjalankan satu atau dua pencarian.
Mencari di web menggeser tingkat sebutan dari 6% ke 78%
Dari 147 jawaban yang tidak mencari apa pun, 9 menyebut merek. Itu 6,1%, dengan interval kepercayaan 95% sebesar 3,3% hingga 11,2%. Dari 68 yang mencari, 53 menyebutnya: 77,9%, interval 66,7% hingga 86,2%. Kedua interval itu sama sekali tidak bersentuhan.
Keberatan yang jelas adalah bahwa ini pertanyaan yang berbeda. Model lebih mungkin mencari untuk perbandingan komersial daripada untuk definisi, dan lebih mungkin menyebut vendor pada jenis pertama. Jadi kami mengambil 9 prompt yang diajukan berulang kali dan pernah berjalan ke dua arah, lalu membandingkan pertanyaan yang sama dengan dirinya sendiri. Putaran yang mencari menyebut merek di 18 dari 23 jawaban, 78,3%. Putaran yang tidak mencari, 7 dari 29, 24,1%. Selisihnya lebih kecil, arahnya sama, intervalnya tetap terpisah.
Anggap 24%, bukan 6%, sebagai batas bawah yang jujur. Apakah model mencari sesuatu adalah pembeda terbesar yang kami temukan antara jawaban yang menyebut Anda dan yang tidak, dan itu tidak ada hubungannya dengan halaman Anda.
Pencarian adalah keputusan model, diambil prompt demi prompt
Saran yang beredar tentang hal ini sudah tertinggal beberapa tahun. Satu panduan yang banyak dibaca menyuruh Anda menjalankan setiap prompt dua kali, sekali di obrolan default dan sekali dengan penjelajahan aktif, seolah pembaca yang memilih. Panduan lain menjelaskan bahwa ChatGPT "tidak mengambil dokumen tertentu" dan bekerja dari pola pelatihan, yang hanya menggambarkan jawaban tanpa pencarian.
Dokumentasi API OpenAI lebih lugas. Memasang alat pencarian web membuatnya tersedia, dan menurut mereka model bisa memilih untuk mencari di web atau tidak berdasarkan isi prompt masukan. Dengan tool_choice diatur ke auto, pencarian bersifat opsional; Anda perlu tool_choice required jika pencarian harus berjalan. Tidak ada yang menekan saklar. Model yang memutuskan, prompt demi prompt, dan bisa memutuskan berbeda untuk pertanyaan yang sama dua kali.
Artinya angka visibilitas Anda adalah dua populasi yang dijumlahkan. Sebagian jawaban mencari dan tidak menyertakan Anda. Sebagian tidak pernah mencari. Masalahnya berbeda, perbaikannya berbeda, dan satu persentase menyembunyikan keduanya.
Google AI Overviews tidak punya versi tanpa mencari
Mesin lainnya berperilaku sama sekali berbeda. Dari 138 jawaban AI Overview yang kami nilai, 81 tidak menyebut merek, dan ke-81 jawaban itu tetap mengutip halaman lain. Median 8 sumber per jawaban, hingga 16.
Itu membuat kegagalan di AI Overviews mudah dibaca. Delapan halaman diambil untuk pertanyaan itu dan tidak satu pun milik Anda. Panduan Google menyebut sebuah halaman memenuhi syarat sebagai tautan pendukung jika terindeks dan bisa ditampilkan dengan snippet, tanpa persyaratan tambahan, dan bahwa memenuhi semua persyaratan tetap tidak berarti Google akan meng-crawl, mengindeks, atau menampilkannya. Google juga menyebut AI Overviews hanya muncul ketika sistemnya menilai ringkasan itu menambah nilai bagi Search klasik, jadi sering kali tidak muncul. Ketidakmunculan itu adalah hasil ketiga, dan tidak termasuk dalam hitungan ini.
94 dari 97 jawaban yang mengutip halaman milik merek juga menyebutnya
Dilihat dari sisi pengambilan, hubungannya timpang. Di kedua mesin, 97 jawaban memasukkan halaman dari domain milik merek ke daftar sumber, dan 94 di antaranya menyebut merek: 96,9%, interval 91,3% hingga 98,9%. Di mesin ChatGPT angkanya 44 dari 44. Di antara jawaban yang mencari tetapi tidak mengutip satu pun halaman merek, tingkatnya turun menjadi 9 dari 24.
Hubungan itu tidak berlaku sebaliknya. 119 jawaban menyebut merek, dan hanya 94 di antaranya punya halaman milik merek di sumbernya, 79,0%. Satu dari lima menyebut merek tanpa ada milik merek yang diambil, yaitu model yang bekerja dari apa yang sudah diketahuinya.
Memasukkan salah satu URL Anda sendiri ke set pengambilan hampir cukup untuk mendapat sebutan dalam data kami, dan tidak pernah wajib. Dari 97 jawaban kami tidak bisa menyebutnya hubungan sebab-akibat.
Apa yang sebenarnya akan kami lakukan
Berurutan, dari yang termurah.
- Pisahkan tingkat sebutan Anda berdasarkan apakah jawaban mengambil sesuatu sebelum Anda bertindak. Satu angka untuk kedua populasi adalah kesalahannya.
- Untuk jawaban yang tidak mengambil apa pun, menulis ulang halaman minggu ini tidak akan menggerakkannya. Itu adalah pengetahuan awal model, dan bergeser mengikuti seberapa lama web secara luas membicarakan Anda.
- Untuk jawaban yang mengambil sesuatu, baca sumber yang dipakainya. Di AI Overviews itu sekitar delapan halaman per pertanyaan, dan menyebut dengan tepat siapa yang diambil sebagai ganti Anda.
- Tanyakan kepada alat apa pun yang memberi Anda skor visibilitas AI yang mana dari dua hal ini yang dihitungnya. Jika tidak bisa menjawab, angka itu adalah rata-rata dari dua kegagalan yang berbeda.
Di mana ini bisa keliru
Catatan terbesarnya ada di pihak kami, bukan mesinnya. Mesin ChatGPT kami memasang alat pencarian web dan membiarkan tool_choice pada auto, hanya memaksa pencarian pada prompt yang terbaca komersial atau bergantung pada kebaruan, jadi 68% yang tidak mencari apa pun sebagian adalah hasil kebijakan kami sendiri. Sesi ChatGPT sungguhan mengatur pencariannya sendiri dan mungkin menjelajah lebih sering daripada yang dipicu sampler kami. Perbandingan dalam prompt yang sama tidak terpengaruh, karena kedua sisi berjalan di bawah kebijakan yang sama, dan itulah angka yang kami pertahankan.
Empat merek dan tiga akun itu tipis, dan dua merek menyumbang sebagian besar jawaban. Set yang dinilai juga merupakan subset: mencakup putaran di mana ekstraksi sebutan menghasilkan baris untuk merek tersebut, 226 dari 1.047 putaran ChatGPT. Jumlah pencarian berasal dari item search-call dalam respons yang disimpan, termasuk yang gagal, jadi angka itu batas atas.
Satu lagi, yang didokumentasikan OpenAI sendiri: kutipan inline bukanlah seluruh pengambilan. Kolom sources mereka mengembalikan setiap URL yang dikonsultasikan model, dan mereka mencatat bahwa daftarnya sering lebih panjang dari daftar kutipan. Kami membaca kutipan, jadi "halaman Anda tidak ada di sumber" berarti "tidak ada di sumber yang bisa kami lihat", dan tingkat pengambilan sebenarnya untuk domain milik sendiri lebih tinggi dari yang kami ukur. Payload AI Overview sampai kepada kami melalui DataForSEO dan kami tidak merender ulang pencarian itu sendiri.
