AI 검색 성과 보고서는 계약 전에 어떻게 검증하는가 — 공급자에게 검증 질문 5가지를 던지면 됩니다. 질문 다섯 개는 공개 학술 연구·업계 공식 발화· 공개 원문(전건 링크 병기)을 근거로 짰습니다. 특정 업체 실명 없이 기준만 다룹니다. 다섯 번째 질문에는 저희부터 답합니다. 자사 실측은 같은 질문을 7회 되묻고, 파노라마 회차는 계획한 관측을 전량 실행해 관측마다 상태를 공개합니다. 같은 기준이 저희에게도 똑같이 적용됩니다. 1회로 만든 값과 7회를 쌓아 만든 값이 같은 이름을 달고도 다른 수인 건, 한 번 측정한 값이 회차마다 흔들리기 때문입니다.
공개 지면에는 이미 주의 공지와 제보 모음(제보 6건)이 올라와 있습니다. AI 답변은 같은 질문에도 달라집니다. 그래서 1회 관측은 점 하나로 찍은 값입니다. 인용은 AI가 답 아래에 출처로 걸어 준 주소를 말합니다. 학술 분석은 그 인용 점유율에 5%p 폭 신뢰구간을 얻으려면 플랫폼별 40~150회 반복이 필요하다고 추정합니다. 반복 수와 신뢰구간 병기를 물어보세요.
왜 지금 검증인가 — 공개 지면에 이미 올라와 있는 것
2026년 들어 7월 초까지, 국내 AI 검색 대응 시장에 대해 공개 지면에 실린 글들이 있습니다. 각 사안의 판단은 원문에 맡기고, 여기에는 링크와 날짜만 둡니다.
- 업체 표기·경력에 관한 공개 검증 글 — 2026-07-04
- 마케팅 커뮤니티의 주의 공지와 제보 모음(제보 6건) — 2026-05-18
- 데이터 기업 블로그의 공개 칼럼 — 2026-06-08
보고서를 파는 쪽이 늘어날수록, 사는 쪽의 검증 기준이 결과를 가릅니다. 아래 다섯 가지는 구현 방법이 아니라 무엇을 요구할지의 목록입니다. 어느 공급자에게든 그대로 물어볼 수 있고, 저희에게 물으셔도 됩니다. 데모 화면과 측정의 구별 같은 각론은 측정 감별 시리즈가 한 편씩 다룹니다. 언급과 인용을 가르는 판정 기준은 별도 각론에 있습니다(시리즈 인덱스).
계약 전에 무엇을 물어야 하나 — 검증 질문 5가지
계약 전 검증 루트 — 질문 다섯, 순서대로
반복 수와 신뢰구간 폭을 공개하는가
AI 답변은 같은 질문에도 달라집니다. 1회 관측은 점 하나로 찍은 값입니다. 그래서 반복 측정과 신뢰구간 병기 보고가 실무 권고입니다(Search Engine Land, 2026-06-10). 한 번만 측정하는 측정의 한계는 학술 분석도 지적합니다(arXiv). 반복을 몇 번 했는지 물어보세요. 그 반복으로 얻은 신뢰구간의 폭까지 공개하는지도 물어보세요. 폭이 넓은 숫자를 넓다고 말해 주는 보고서가 믿을 수 있는 보고서입니다.
관측 실패·판정불가를 상태로 공개하는가
수집 실패, AI 답변 미표출, 브랜드 부재, 판정 보류가 성공 관측과 같은 분모에 섞이면 비율이 왜곡됩니다. 계획한 측정 전부가 어떤 상태로 끝났는지 확인하세요. 실패와 판정불가까지 상태별로 따로 적어 주는지가 기준입니다.
측정 시각·모델·설정이 재현 가능하게 남는가
언제, 어떤 모델로, 어떤 설정에서 측정했는지가 영수증으로 남아야 다음 측정과 비교할 수 있습니다. 숫자에 의문이 생겼을 때 그 자리로 되짚어 갈 수 있습니다. 캡처 화면 모음이 아니라 측정 조건의 기록을 요구하세요.
가격이 공개돼 있는가
공개 가격은 견적 협상의 기준선이자 사후 검증의 기준입니다. 같은 범주의 견적 여러 장을 나란히 놓고 측정 규모·산출물·가격을 항목별로 대조할 수 있는지 보세요.
측정과 실행 판매가 어떤 관계인가
측정하는 쪽과 실행하는 쪽이 같은 회사라면, 측정 결과가 실행 판매를 정당화하는 구조인지 물어보세요. 그 관계 자체가 나쁜 것이 아니라, 관계를 밝히고 측정을 검증 가능하게 만드는지가 기준입니다.
다섯 질문을 한 장으로 보면 이렇습니다. 미팅에 그대로 들고 가셔도 됩니다. 국내외 측정 상품들이 공개 페이지에 스스로 밝힌 내용의 대조는 공개 정보 비교에 따로 있습니다.
| 질문 | 왜 필요한가 | 합격 신호 | 저희 답 |
|---|---|---|---|
| 반복 수와 신뢰구간 폭을 공개하는가 | 1회 관측은 점 추정치라 재면 흔들린다 | 반복 수와 신뢰구간 폭을 숫자 그대로 병기 | 유료 진단은 질의마다 7회. 비율마다 Wilson 95% 구간과 표본 수를 붙입니다 |
| 관측 실패·판정불가를 상태로 공개하는가 | 실패가 분모에 섞이면 비율이 왜곡된다 | 계획 대비 전 관측을 상태별로 분리 기록 | 계획·실행·유효 세 수를 함께 냅니다. 파노라마는 계획한 관측 전건의 상태를 공개합니다 |
| 측정 시각·모델·설정이 재현 가능하게 남는가 | 기록이 없으면 다음 측정과 비교할 수 없다 | 캡처 모음이 아니라 측정 조건의 영수증 | 측정 조건을 잠가 두는 봉인 해시 원장에 남기고, 대외 수치는 공개 클레임 레지스트리에 등록합니다 |
| 가격이 공개돼 있는가 | 공개 가격이 견적 협상·사후 검증의 기준선 | 측정 규모·산출물·가격을 항목별 대조 가능 | 진단 사다리 네 가지를 가격표에 전액 공개합니다 |
| 측정과 실행 판매가 어떤 관계인가 | 측정이 실행 판매를 정당화하는 구조일 수 있다 | 관계를 밝히고 측정 자체를 검증 가능하게 유지 | 둘 다 팝니다. 그래서 측정마다 영수증을 남기고, 잰 결과대로 지면을 고치는 데까지 한 계약으로 갑니다 |
다섯 번째 질문에는 저희부터 답하겠습니다
저희는 측정과 실행을 모두 팝니다. 그래서 모든 측정에 영수증을 남깁니다. 쓸 수 있는 모든 비율에 신뢰구간을 병기하고 그 폭을 그대로 공개합니다. 관측 상태는 따로 적습니다. 진단 가격은 표에 그대로 적어 둡니다. 대외 문안의 수치 주장은 출처·기준일과 함께 공개 클레임 레지스트리에 등록합니다. 측정이 어떻게 이뤄지는지는 방법론에, 상품 구성과 진단 가격은 가격표에 있습니다.
검산하지 않고 받으면
받은 리포트를 검산하지 않으면 숫자가 맞는지 알 길이 없습니다. 분모가 빠진 비율은 언제나 좋아 보입니다. 그 한 장으로 결재하면 다음 분기 예산이 엉뚱한 곳으로 나가고 기회를 놓칩니다.
원자료를 요구하지 않으면 그 숫자가 어떻게 만들어졌는지 확인할 수 없습니다. 못 읽은 칸을 분모에서 빼면 비율은 저절로 올라갑니다. 그 계산을 걸러 내지 못하면 지난 회차와의 비교가 성립하지 않습니다.
이 가이드의 검증 기준은 외부 공개 연구·업계 공식 발화에 근거합니다. 본문의 링크로 원문을 직접 확인할 수 있습니다. 질문 목록은 특정 업체를 겨냥하지 않습니다. 저희를 포함한 모든 공급자에게 같은 기준으로 적용하세요.
이 다섯 질문을 저희에게 먼저 던지십시오
반복 수, 신뢰구간 폭, 관측 상태, 재현 가능한 영수증, 공개 가격. 답은 이미 지면에 올라가 있고 링크로 바로 확인됩니다. 같은 질문을 다른 공급자에게도 그대로 하시면 됩니다. 답이 갈리는 자리가 곧 계약 조건이 갈리는 자리입니다.