측정 결과와 방법을 공개합니다.
답변 엔진에 관한 또 하나의 팁 10가지 글은 아무도 필요로 하지 않습니다. 빠진 것은 일정에 따라 엔진을 샘플링하고, 구간을 붙여 수치를 공개하는 사람입니다. 우리 제품을 살 이유가 없다는 수치까지 포함해서요.
최신 노트
각각 샘플, 날짜, 틀릴 수 있는 지점을 밝힙니다. 형식은 그게 전부입니다.
AI 엔진은 공급사 자체의 베스트 목록을 인용하고도 38%의 경우 그 공급사를 빼먹었습니다
많은 소프트웨어 회사가 자사를 맨 위에 둔 "X를 위한 최고의 도구" 목록을 게시하고 AI 엔진이 이를 인용하기를 기대합니다. 저희는 네 엔진에서 나온 구매자 질문 답변 17,651개를 살펴보며, 인용 수 집계가 건너뛰는 질문을 던졌습니다. 엔진이 공급사 자체의 목록을 인용했을 때, 답변은 그 공급사를 언급했을까요?
메모 읽기ChatGPT API가 인용한 사이트 중 ChatGPT 자체에 나타난 것은 22%뿐이었습니다
일부 AI 가시성 도구는 OpenAI API로 ChatGPT에 질문합니다. 다른 도구는 방문자가 보는 그대로 chatgpt.com을 읽습니다. 저희는 같은 구매자 질문 172개에 대해 하루 간격으로 두 답변을 모두 확보했고, chatgpt.com이 하루 간격으로 스스로 다시 답한 기준선도 확보했습니다. 브랜드 언급률은 유지되었지만 출처는 그렇지 않았습니다.
GPT-6로 ChatGPT의 답변은 40% 길어졌지만, 언급한 브랜드는 같았습니다
ChatGPT 무료 플랜은 10월 8일 GPT-6로 바뀌었습니다. 저희는 16개 브랜드의 같은 구매자 질문 188개를 전환 전후로 모두 확보했고, 대조군으로 같은 질문을 Claude, Perplexity, Google AI Overviews에도 물었습니다. ChatGPT가 브랜드를 언급하는지는 거의 변하지 않았습니다. 답변의 나머지는 거의 모두 바뀌었습니다.
브랜드 사이트 72곳 중 7곳이 JavaScript를 실행하지 않는 AI 크롤러에게 핵심 페이지를 숨겼습니다
ChatGPT의 페이지 리더, Claude, Perplexity는 서버가 보내는 HTML을 읽고 스크립트는 절대 실행하지 않습니다. 저희는 브랜드 사이트 72곳의 핵심 페이지 211개에서 이 화면을 브라우저 화면과 비교했습니다. 대부분은 온전히 전달되었습니다. 7곳은 헤드라인, 가격표, 또는 모든 고객 사례를 잃었고, 무서워 보이던 점수의 절반은 쿠키 배너였습니다.
브랜드를 언급한 AI 답변 13개 중 1개는 그 브랜드에 대한 사실을 틀렸습니다
언급률은 답변이 회원님을 언급하는 순간 성공으로 집계합니다. 저희는 ChatGPT, Perplexity, Claude, Google AI Overviews에서 나온 그런 답변 2,137개가 브랜드 80곳에 대해 실제로 무엇을 말했는지 확인했습니다. 무엇이 틀렸는지, 어떤 답변이 틀렸는지, 그리고 회원님의 수치 뒤에서 무엇을 열어 봐야 하는지 정리했습니다.
구매자 질문을 바꿔 묻는 것이 다시 묻는 것보다 AI 답변을 더 크게 움직였습니다
저희는 ChatGPT, Perplexity, Claude, Google AI Overviews에서 브랜드 96곳을 대상으로 두 가지를 비교했습니다. 같은 구매자 질문을 다시 묻는 것과, 같은 날 다른 방식으로 묻는 것입니다. 표현이 훨씬 더 중요했습니다. 어떤 표현을 테스트할지에 이것이 어떤 의미인지 정리했습니다.
AI 답변의 일일 변화 중 절반은 다음 날 되돌아갔습니다
저희는 같은 구매자 질문 40개를 ChatGPT, Perplexity, Claude, Google AI Overviews에 7~9일 동안 매일 물었습니다. 이름 다섯 개 중 약 하나가 하룻밤 사이 답변에서 빠졌고, 그런 변화의 거의 절반이 다음 날 되돌아갔습니다. 매일 스캔과 매주 스캔 중 무엇을 고를지에 이것이 어떤 의미인지 정리했습니다.
ChatGPT는 첫 검색어에 넣은 브랜드의 89%를 언급했습니다
ChatGPT는 구매자의 질문을 그대로 검색하지 않습니다. 자기만의 검색어를 쓰며, 저희가 표본으로 삼은 로그아웃 답변 2,502개에서 그 검색어에는 아무도 입력하지 않은 브랜드 이름이 이미 들어 있는 경우가 많았습니다. ChatGPT가 검색한 브랜드는 89%의 경우 언급되었습니다. 추천을 받는 데 이것이 어떤 의미인지, 회원님이 그 선의 어느 쪽에 있는지 확인하는 방법을 정리했습니다.
어떤 브랜드도 언급하지 않은 질문에서 AI 선두 기업은 59%에서 40%로 떨어졌습니다
저희는 엔진이 가장 자주 언급하는 AI 가시성 도구와 저희 브랜드를 비교했습니다. 구매자 질문 25개, 엔진 4개, 답변 220개입니다. 그중 9개 질문이 도구 이름을 언급했고, 그 9개가 선두 기업의 일을 상당 부분 대신해 주었습니다. 보고하는 격차가 진짜 격차가 되도록 비교를 설정하는 방법을 정리했습니다.
ChatGPT는 같은 날 하나의 도구를 GEO라고도, AEO라고도 불렀습니다
저희는 AI 답변 속 브랜드를 추적하는 도구에 관한 질문 25개를 ChatGPT, Perplexity, Claude, Google AI Overviews에 물었습니다. 어떤 질문도 AEO나 GEO라는 말을 쓰지 않았습니다. 답변 180개 중 64개가 GEO를, 31개가 AEO를 썼고, 같은 공급사에 둘 다 쓰는 경우가 많았습니다. 두 용어의 기원, 이름표가 선택에 도움이 되지 않는 이유, 그리고 도움이 되는 구분을 정리했습니다.
AI 언급률은 같았지만, 첫 번째로 언급된 횟수는 38번 대 15번이었습니다
대부분의 AI 가시성 도구는 언급률을 앞세웁니다. 저희가 추적하는 한 카테고리에서 두 회사는 ChatGPT, Perplexity, Claude, Google AI Overviews의 답변 160개 중 각각 70개에서 언급되었습니다. 한 회사는 38번, 다른 회사는 15번 첫 번째로 언급되었습니다. 언급률은 이것을 보지 못합니다. 돈을 내기 전에 도구가 무엇을 측정해야 하는지, 그리고 실제로 그런지 알려 주는 질문을 정리했습니다.
엔진은 llms.txt를 게시한 사이트 129곳을 6,343번 인용했고, 그 파일 자체는 한 번이었습니다
llms.txt는 AI 검색에서 가장 많이 권장되면서 가장 적게 검증된 해결책입니다. 저희 표본에서 ChatGPT, Perplexity, Claude, Google AI Overviews가 가장 많이 인용한 도메인 300곳을 골라 각각의 파일을 가져왔습니다. 129곳이 파일을 게시합니다. 그 129곳은 6,343번 인용되었고, 파일을 가리킨 인용은 하나였습니다. 가장 많이 인용된 사이트 10곳 중 8곳은 파일이 없습니다. 이 파일의 용도와, 대신 시간을 써야 할 곳을 정리했습니다.
저희 추적기는 검색의 96%에서 Google AI Overview를 놓쳤습니다. 설정 하나로 해결되었습니다
8월 22일부터 9월 7일까지 저희 샘플러는 검색 201건 중 193건에서 Google AI Overview가 없다고 기록했습니다. Google은 거의 매번 Overview를 보여 주고 있었습니다. Overview는 페이지 뒤에 로드되고, 데이터 공급사는 요청할 때만 이를 돌려줍니다. 수정 후 같은 질문 36개에서 빈 결과는 검색 487건 중 3건이었습니다. 추적기가 Google에 대해 주는 모든 수치에 이것이 어떤 의미인지 정리했습니다.
어디에나 나오는 사이트 7곳은 15개 카테고리에서 인용의 5%를 차지했습니다
어떤 사이트에 언급되어야 하느냐고 물으면 늘 같은 목록이 돌아옵니다. Reddit, Wikipedia, YouTube, LinkedIn입니다. 그 목록은 사실이며, 사람들이 묻는 모든 주제로 만들어졌습니다. 저희는 대신 15개 카테고리의 구매자 질문 뒤에 있는 인용을 셌습니다. 어디에나 나오는 사이트는 거의 보이지 않았습니다. 인용된 거의 모든 것이 한 카테고리에만 속했습니다.
AI 엔진 하나가 브랜드를 언급했을 때, 네 엔진 모두가 언급한 비율은 32%였습니다
대부분의 AI 가시성 리포트는 수치 하나, 또는 엔진별로 비슷해 보이는 수치를 줍니다. 저희는 같은 비브랜드 질문을 같은 날 ChatGPT, Google AI Overviews, Perplexity, Claude에 묻고 질문별로 답변을 비교했습니다. 엔진들은 각자가 다음 날 자기 자신과 엇갈리는 것보다 서로 더 많이 엇갈렸습니다.
저희가 센 AI 인용의 16%는 경쟁사 웹사이트가 가져갔습니다. 브랜드 자체 사이트는 0.87%였습니다.
절반의 조언은 자사 도메인에 깊이 있는 글을 게시하면 엔진이 찾아낸다고 말합니다. 나머지 절반은 자사 도메인은 거의 중요하지 않다고 말합니다. 저희는 비브랜드 구매자 질문에 대한 답변 1,205개의 인용을 모두 셌습니다. 공급사 웹사이트가 가장 큰 출처 덩어리였으므로 이 채널은 분명히 작동합니다. 다만 질문하는 브랜드 자신의 웹사이트인 경우는 거의 없었습니다.
소프트웨어 디렉터리는 AI 인용의 1.8%이며, 인용된 페이지가 회원님의 것인 경우는 거의 없습니다
흔한 조언은 G2와 Capterra 프로필을 등록하고 모든 항목을 채우라는 것입니다. 리뷰 프로필이 AI 답변의 출처라는 이유에서입니다. 저희는 표본 답변 1,099개의 인용을 모두 셌습니다. 디렉터리는 그중 1.8%였고, 엔진이 가져간 페이지는 대개 카테고리 순위나 경쟁사의 대안 목록이었습니다. 브랜드 자체 프로필은 9,198건 중 8번 나왔습니다.
ChatGPT는 검색했을 때 78%, 검색하지 않았을 때 6%의 비율로 브랜드를 언급했습니다
ChatGPT에 카테고리의 최고 도구가 무엇이냐고 물으면 경쟁사는 나오고 회원님은 나오지 않습니다. 흔한 설명은 콘텐츠의 권위가 부족하다는 것입니다. 저희 표본에서 더 그럴듯한 설명은 모델이 아무것도 찾아보지 않았다는 것이었습니다. 기억으로 답했고, 그럴 때 브랜드를 언급한 비율은 78%가 아니라 6%였습니다.
AI Overviews 속 YouTube 링크의 59%는 특정 타임스탬프로 이동했습니다
모든 가이드가 YouTube 채널을 시작하라고 말합니다. Google이 자사 플랫폼을 우대한다는 이유입니다. 실제로 저희 표본에서 YouTube는 가장 많이 인용된 도메인이었고, Google AI Overview 인용의 10.4%, ChatGPT 인용의 0.7%였습니다. 그다음 링크 자체를 살펴봤습니다. 대부분은 동영상 안의 특정 초로 건너뛰었고, 대개 처음 2분 안이었습니다. 533건 중 11건만이 저희가 측정하던 브랜드의 채널에 있었습니다.
Reddit은 AI 인용의 3%이며, 그 하나하나가 단일 스레드입니다
ChatGPT의 추천을 받는 법을 다룬 모든 가이드가 Reddit에 가라고 말합니다. 저희는 5주 동안 두 엔진이 실제로 인용한 것을 셌습니다. Reddit은 도메인 목록 상위권에 있었지만 링크의 약 3%를 차지했습니다. 183건 모두 단일 스레드를 가리켰고, 두 엔진이 같은 스레드를 고른 경우는 거의 없었습니다. 이는 브랜드가 그곳에서 해야 할 일을 바꿉니다.
30일로 바꿀 수 있는 것은 ChatGPT가 찾아보는 것이지, 기억하는 것이 아닙니다
ChatGPT에 회원님 카테고리의 최고 도구를 물었더니 회원님이 아닌 회사 다섯 곳을 댔습니다. 무엇이든 게시하기 전에, 새 페이지가 답변의 어느 절반에 닿을 수 있는지 아십시오. 모델의 기억은 몇 달 전에 고정되었습니다. 찾아보는 절반은 오늘의 웹을 읽으며, 그것도 엔진이 검색하기로 정했을 때만입니다. 저희라면 첫 30일을 이렇게 쓰고, 그 끝에 새 페이지를 평가하지 않을 것입니다. 그 이유도 설명합니다.
모음 글이 이미 회원님에 대해 쓴 한 줄부터 고치십시오
AI 가시성에 관한 모든 가이드는 더 많은 모음 글에 이름을 올리라고 말합니다. 이미 회원님을 언급하는 모음 글이 가격, 요금제, 대상 고객을 틀리게 적는 경우가 많고, 모델이 회원님의 홈페이지 대신 그 문장을 반복한다는 것은 아무도 말하지 않습니다. Zapier는 선정 기준, 테스트 방법, 양식을 공개하며, 그 양식의 유일한 확실한 약속은 틀린 정보를 고치는 것입니다. 가장 저렴한 한 수입니다.
오차 막대가 겹쳐도 12포인트 하락은 실제입니다
가시성이 42%에서 30%로 떨어졌는데 오차 막대가 여전히 닿아 있어 아무 알림도 울리지 않았습니다. 같은 모집단에서 그린 95% 구간 두 개는 99% 이상 겹치므로, 겹침 확인은 원했던 5%가 아니라 대략 1% 검정입니다. 같은 Prompts 200개에서 제대로 된 검정은 p = 0.012, 실제로 뒤집힌 Prompts를 비교하면 p = 0.00006입니다. 저희 알림 기준이 틀리는 부분까지 포함해 계산을 보여 드립니다.
지금 가진 AI 가시성 수치는 모두 첫 턴의 수치입니다
저희 것을 포함해 모든 답변 엔진 도구는 각 Prompt를 새 채팅에서 실행하고 누가 언급되었는지 보고합니다. 구매자는 질문 하나에서 멈추지 않습니다. 모델 15개에 걸친 대화 200,000개 실험에서, 같은 요청을 두 턴 이상에 나눠 전달하자 성능이 39% 떨어지고 최고와 최악 실행의 격차가 두 배 넘게 벌어졌습니다. 두 번째 턴의 후보 목록은 다른 측정이며, 아무도 그것을 재지 않고 있습니다.
알려진 브랜드는 매번 이깁니다. 경쟁사가 별점 0.1개 앞서기 전까지는
2026년 6월의 한 연구는 브랜드 이름만 다른 제품 10개를 모델 세 개 앞에 놓았습니다. 알려진 브랜드가 모든 시행에서 이겼습니다. 그다음 연구자들이 무명 경쟁사에 측정 가능한 가장 작은 우위를 주자, 독점은 한 번에 무너졌습니다. 실제 차이가 조금이라도 있으면 브랜드 정체성은 1위 선정의 1.2%만 설명합니다.
언급은 가만히 있습니다. 감성은 6.7배 더 자주 뒤집힙니다.
엔진이 카테고리 질문에서 회원님을 언급하는지는 거의 확정된 사실에 가깝습니다. 추적한 셀의 77.5%는 엄격히 늘 언급되거나 전혀 언급되지 않았습니다. 움직이는 것은 답변이 회원님에 대해 하는 말이며, 보고할 내용이 있는 셀의 거의 절반에서 뒤집혔습니다. 대부분의 대시보드는 안정적인 수치를 앞세우고 거기에 알림을 겁니다.
최고의 소프트웨어를 물으면 인용 출처의 73%가 제3자 사이트입니다
AI 답변은 회원님 페이지에 대한 판결이 아닙니다. 약 8개 출처의 묶음이며, 소프트웨어 질문에서는 그중 약 4분의 3이 리뷰어와 비교 사이트의 것입니다. 1973년에 정의된 지표인 공동 인용이 쓸모 있는 렌즈입니다. 두 문서는 다른 누군가가 둘 다를 계속 찾았기 때문에 이웃이 됩니다. 누구 옆에 나올지는 회원님이 고르지 않으며, 그 동반자가 구매자가 회원님을 읽는 방식을 만듭니다.
인용이 0이라고 모델이 회원님 페이지를 쓰지 않은 것은 아닙니다
AI 답변 아래의 링크 칩은 영수증처럼 느껴집니다. 실제로는 캡션에 가깝습니다. 모델이 사후에 자신의 검색에 대해 만들어 낸 텍스트입니다. Tow Center는 AI 검색 도구 8개에 정확한 문단을 건네고 누가 게시했는지 물었고, 도구들은 60% 이상 틀렸습니다. 엔진이 가져온 것과 출처로 밝힌 것 사이의 간극에서 많은 브랜드 가시성이 조용히 사라집니다.
한 번 물었고 모델이 회원님을 언급했습니다. 정직한 해석은 21%~100%입니다.
누군가 카테고리 질문을 ChatGPT에 입력하고, 답변에서 브랜드를 보고, 채널에 스크린샷을 올립니다. 그 스크린샷은 베르누이 시행 한 번입니다. 95% Wilson 구간을 씌우면 본 것과 양립하는 범위는 20.7%에서 100%까지입니다. 엔진은 설계상 비결정적이며, AI 가시성의 변화로 보고되는 것 대부분은 발견을 담기에는 너무 작은 표본입니다.
Google AI Mode는 질문 하나를 검색 십여 개로 바꿉니다. 회원님은 그중 하나를 추적합니다.
Google은 AI Mode가 어떻게 작동하는지 적어 두었고, 그것은 순위 목록이 아닙니다. 질문 하나가 하위 주제로 쪼개지고, 엔진이 직접 쓴 검색 묶음으로 답해집니다. Google의 엔지니어링 디렉터는 일상적인 경우를 십여 개로 봅니다. 대표 검색어 하나를 추적한다면, 묶음 중 회원님이 고른 유일한 질문만 지켜보는 것입니다.
GPTBot을 차단해도 ChatGPT에서 빠지지 않습니다. OAI-SearchBot을 차단하면 빠집니다.
GPTBot을 차단하는 robots.txt 한 줄이 돌고 있고, 많은 사람이 ChatGPT에 대해 결정을 내렸다고 생각하며 그것을 추가했습니다. 그들이 내린 것은 다른 결정이었습니다. 각 엔진 자체 문서를 바탕으로 어떤 에이전트가 실제로 어떤 답변을 좌우하는지, 그리고 오후 한나절에 사이트를 확인하는 방법을 정리했습니다.
AI 요약이 나오면 클릭이 15%에서 8%로 떨어집니다
Pew는 900명이 한 달 동안 검색하는 것을 지켜봤습니다. AI 요약이 나오면 사람들은 결과를 15%가 아니라 8%의 경우 클릭했고, 요약 안의 출처는 1%의 경우 클릭했습니다. 이것이 브랜드에 무엇을 하는지, 그리고 수치가 어디서 틀릴 수 있는지 정리했습니다.
저희가 계속 다시 확인하게 되는 세 가지 발견
세 가지 모두 저희가 테스트한 카테고리에서 직접 실시간으로 측정한 값입니다. 신뢰할 만한 출처를 찾을 수 없어서, 어느 것도 시장 전망치가 아닙니다.
저희가 테스트한 카테고리에서 ChatGPT 가 “최고의 X”에 대해 인용한 것의 44%가 리스티클이었습니다. 리뷰 사이트 24%, 업체 페이지 18%, 에디토리얼 14%. 이런 목록형 글은 대부분 등록 신청을 받으므로, 리포트 전체에서 가장 적은 비용으로 메울 수 있는 빈틈입니다. 글 한 편이 나올 만한 내용이고, 비밀은 없습니다.
우리가 추적하는 어떤 엔진도 llms.txt를 순위 신호로 문서화하지 않았습니다. 이 분야에서 가장 많이 권장되는 항목입니다. 게시 비용이 적고 저희도 게시하지만, 그것만으로 언급되지는 않습니다. 판매를 놓치게 되더라도 저희는 계속 이렇게 말할 것입니다.
거의 모든 표현에서 같은 5~7개 이름이 유지됩니다. 목록이 무작위로 바뀐다면 들어갈 가치가 없겠지만, 그렇지 않습니다. 목록은 유지됩니다. 그래서 들어갈 가치가 있고, 들어간 뒤에는 지킬 가치가 있습니다.
모든 게시물은 샘플, 날짜, 틀릴 수 있는 지점을 밝힙니다. 형식은 그게 전부입니다.
내일 같은 질문을 하면 이름의 9~27%가 바뀝니다.
자체 샘플링에서 하루 사이 변동은 Perplexity 엔진이 27%로 가장 컸고, Claude 엔진이 9%로 가장 작았습니다. 답변 엔진에 관한 글은 검색에 관한 글보다 훨씬 빨리 낡습니다. 그래서 저희는 의견보다 지속적인 측정 결과를 공개하는 쪽을 택합니다.
- 모든 수치에 95% Wilson 점수 구간이 붙어, 일시적 흔들림을 진전으로 포장해 팔 수 없습니다
- 글에서 수치를 인용할 때는 표본을 수집한 날짜를 함께 밝힙니다
- 발견이 더는 맞지 않으면, 맞지 않는다고 밝힙니다
같은 질문, 하루 간격으로 언급되는 브랜드가 평균적으로 얼마나 바뀌는지. Proofsource 샘플링 기준.
작성 목록에서
저희가 다음으로 측정하고 정리할 내용.
답변 하나는 측정이 아닙니다
단 한 번의 실행에도 구간이 붙는 이유, 그리고 Wilson 구간이 실제로 배제하는 것.
인용을 지도처럼 읽기
답변 뒤의 출처를 보면 어떤 페이지에 올라야 하는지 알 수 있습니다. 근거를 보여 드리겠습니다.
존재, 위치, 프레이밍
언급되는 것, 가장 먼저 언급되는 것, 좋게 언급되는 것은 서로 다른 세 가지 측정입니다.