◆OptiAnalytics
제품기능예제개념가격블로그FAQ

AI 답변 측정 결과를 경쟁 브랜드와 비교하는 기준 맞추기 6단계

측정과 지표발행됨2026. 11. 6.조회 33
AI 답변 측정 결과를 경쟁 브랜드와 비교하는 기준 맞추기 6단계

AI 답변 측정 결과를 경쟁 브랜드와 비교하려면 먼저 네 가지를 같게 맞춰야 합니다. 질문 세트, 조회 조건, 판정 규칙, 분모입니다.

그다음 브랜드마다 따로 조회하지 않고, 같은 답변 안에서 모든 브랜드를 함께 셉니다. 이 두 가지가 맞지 않으면 AI 검색 측정에서 나온 차이가 브랜드에서 생긴 것인지, 조회 방식에서 생긴 것인지 구분할 수 없습니다.

경쟁 브랜드와 비교할 때 왜 기준부터 맞춰야 하나요?

Google Search Console 도움말은 검색 결과가 검색하는 사람의 시간, 장소, 기기, 최근 기록에 따라 다르다고 설명합니다. Google 검색 센터 문서는 AI 개요와 AI 모드가 서로 다른 모델과 기법을 쓸 수 있다고 설명합니다. 그래서 두 기능이 보여 주는 답변과 링크 구성도 다를 수 있습니다.

예를 들어 자사는 오전에 AI 모드에서, 경쟁 브랜드는 오후에 AI 개요에서 확인했다면 그 차이는 비교 결과로 쓸 수 없습니다. 시간과 기능, 두 가지 조건이 함께 달라졌기 때문입니다. 아래 여섯 단계는 이런 차이를 하나씩 고정하는 순서입니다.

단계맞출 기준맞추지 않으면 생기는 문제
1비교 브랜드와 표기 사전같은 답변을 두고 사람마다 판정이 갈립니다
2브랜드 이름이 없는 질문 세트질문 문구가 특정 브랜드에 유리해집니다
3엔진·모드·모델·계정 상태서로 다른 서비스의 결과를 섞게 됩니다
4조회 기간과 반복 횟수시점 차이가 브랜드 차이처럼 보입니다
5등장 유형별 판정 규칙이름 언급과 출처 인용이 한 숫자로 섞입니다
6공통 분모와 원자료브랜드마다 다른 분모로 나눈 비율을 비교하게 됩니다

비교 대상과 질문은 어떻게 고정하나요?

1단계: 경쟁 브랜드 목록과 표기 사전을 만듭니다

먼저 비교할 경쟁 브랜드를 정하고, 브랜드마다 답변에서 인정할 표기를 모읍니다. 한글 명칭, 영문 명칭, 약칭, 띄어쓰기 변형이 대상입니다. 띄어쓰기만 다른 표기는 공백을 지운 비교값으로 같은 브랜드로 판정합니다.

대표 상품명이나 서비스명을 브랜드 등장으로 인정할지도 이 단계에서 정합니다. 예를 들어 가상의 ○○ 기업이라면 회사명과 대표 서비스명은 인정합니다. 일반 명사와 겹치는 약칭은 오판정이 많으므로 제외 표기로 둡니다.

완료 기준: 브랜드마다 인정 표기와 제외 표기가 표로 정리되어 있습니다. 두 사람이 같은 답변을 읽어도 같은 판정이 나오는 상태입니다.

2단계: 브랜드 이름이 없는 질문 세트를 고정합니다

비교용 질문에는 특정 브랜드 이름을 넣지 않습니다. 자사 이름이 들어간 질문은 답변이 자사 중심으로 구성되어 공정한 비교가 되지 않습니다. 브랜드 이름을 넣은 질문은 평판 확인용 세트로 따로 운영합니다.

Google AI 모드 도움말은 더 나은 답을 얻으려면 질문을 여러 방식으로 물어보라고 안내합니다. 표현에 따라 답이 달라질 수 있다는 뜻입니다. 실무에서는 한 주제를 두세 가지 표현으로 나누어 함께 고정하는 방법을 권합니다.

가상의 중소기업용 회계 소프트웨어 업종이라면 질문 세트는 다음과 같이 만들 수 있습니다.

  1. Q01 중소기업용 회계 프로그램은 무엇을 기준으로 고르나요?
  2. Q02 회계 담당자가 한 명뿐인 회사에 맞는 회계 소프트웨어를 추천해 주세요.
  3. Q03 전자세금계산서 발행과 연동되는 회계 프로그램에는 어떤 것이 있나요?
  4. Q04 회계 프로그램을 바꿀 때 기존 데이터 이전이 쉬운 곳은 어디인가요?
  5. Q05 직원 10명 이하 회사가 쓰기 좋은 회계 소프트웨어를 비교해 주세요.

완료 기준: 질문마다 번호가 붙어 있고, 측정 기간 동안 문구를 바꾸지 않습니다. 문구를 고쳐야 하면 기존 번호를 수정하지 않고 새 번호를 붙입니다.

조회 조건은 무엇을 같게 두어야 하나요?

3단계: 엔진·모드·모델·계정 상태를 고정합니다

Perplexity 도움말은 사용자가 필요에 맞는 AI 모델을 고를 수 있다고 설명합니다. 같은 서비스라도 선택한 모델이 다르면 다른 조건으로 기록합니다.

Google AI 모드 도움말은 개인 맞춤 기능이 검색 서비스 기록에 저장된 이전 검색과 활동을 참고한다고 설명합니다. Perplexity 도움말은 세션이 앞서 나눈 대화를 기억한다고 설명합니다. 따라서 질문마다 새 대화를 엽니다. 계정은 로그아웃 상태와 기록을 끈 측정 전용 계정 가운데 한 가지로 정해, 측정 기간 내내 그 상태로만 조회합니다.

조건고정 방법기록 예
엔진·모드AI 개요, AI 모드, 대화형 서비스를 따로 집계Google AI 모드
모델모델을 고를 수 있는 서비스는 같은 모델로 조회기본 모델
계정 상태로그아웃 상태 또는 기록을 끈 측정 전용 계정. 측정 기간 내내 둘 중 한 가지 상태만 씁니다. 상태를 바꾸면 새 조건 코드를 붙입니다측정 전용 계정, 기록 꺼짐
대화질문마다 새 대화에서 조회새 대화
장소·기기같은 국가, 언어, 기기 유형한국, 한국어, PC

완료 기준: 다섯 조건이 조건표에 적혀 있고, 조건 조합마다 코드가 붙어 있습니다. 모든 조회 기록에 그 코드가 남아 있는 상태입니다.

4단계: 같은 기간에 같은 횟수로 조회합니다

Perplexity 도움말은 질문할 때마다 웹에서 실시간으로 콘텐츠를 가져온다고 설명합니다. 조회 날짜가 다르면 답변이 참고한 웹 문서도 달라질 수 있습니다.

실무에서는 경쟁 브랜드를 따로 조회하지 않는 방식을 권합니다. 브랜드 이름이 없는 질문 하나의 답변에서 자사와 경쟁 브랜드의 등장 여부를 한 번에 판정합니다. 이렇게 하면 시점과 조건의 차이가 모든 브랜드에 똑같이 적용됩니다.

한 질문은 정해진 횟수만큼 반복해서 조회하고, 회차마다 같은 횟수를 유지합니다. 조회 기간도 회차마다 같은 길이로 정합니다. 실무에서는 예를 들어 질문당 3회, 회차당 같은 주 안에서 조회하는 식으로 시작하는 방법을 권합니다. 이후 운영 여건에 맞게 조정하되, 바꾼 회차부터는 새 기준으로 표시합니다.

완료 기준: 모든 질문이 같은 횟수로 조회되었고, 모든 조회 시각이 정한 기간 안에 있습니다.

브랜드가 나왔는지는 어떤 규칙으로 판정하나요?

5단계: 등장 유형을 나누어 판정합니다

답변 본문에 이름이 나온 것과 출처로 연결된 것은 다른 현상입니다. Perplexity 도움말은 응답마다 인용 표시와 원본 출처 링크가 붙는다고 설명합니다. 이름 언급과 출처 인용을 따로 세야 브랜드끼리 같은 잣대로 비교할 수 있습니다.

유형판정 기준해당하지 않는 경우
언급답변 본문에 표기 사전의 이름이 나옴질문 문구를 되풀이한 부분에만 나옴
출처 인용출처 링크가 그 브랜드의 공식 사이트로 연결됨제3자 기사가 브랜드를 다룬 경우(언급으로만 판정)
추천선택을 돕는 맥락에서 후보로 제시됨단점이나 주의 대상으로만 거론됨

세 유형은 따로 셉니다. 한 답변이 여러 유형에 해당하면 모두 표시합니다. 본문에 이름이 없고 출처로만 연결되어도 출처 인용으로 셉니다.

판정 규칙은 문장으로 적고, 모든 브랜드에 같은 규칙을 적용합니다. 실무에서는 회차마다 일부 답변을 두 번째 담당자가 다시 판정해 결과를 대조하는 방법을 권합니다. 판정이 다르게 나온 사례는 규칙 문서에 예시로 추가합니다.

완료 기준: 판정 규칙 문서가 있고, 다시 판정한 답변에서 생긴 불일치가 모두 규칙에 반영되어 있습니다.

결과는 어떤 분모로 비교하고 기록하나요?

6단계: 같은 분모로 나누고 원자료를 남깁니다

분모는 브랜드별로 따로 정하지 않습니다. 해당 회차에서 받은 유효 답변 전체가 모든 브랜드의 공통 분모입니다. 어느 브랜드도 나오지 않은 답변도 분모에 넣고, 오류나 답변 거부는 모든 브랜드에서 함께 뺍니다.

결과는 비율만 쓰지 않고 「12/40」처럼 횟수와 분모를 함께 적습니다. 분모가 작으면 한두 건 차이로도 비율이 크게 움직이기 때문입니다. 실무에서는 브랜드 간 등장 횟수 차이가 질문당 반복 횟수보다 작으면 우열로 보고하지 않는 방법을 권합니다. 그런 차이는 다음 회차 결과와 함께 판단합니다.

원자료는 다음 양식으로 한 답변당 한 줄씩 기록합니다.

조회 일시조건 코드질문 번호반복자사경쟁 A경쟁 B인용된 출처
2026-10-20 10:05G-AIM-01Q011언급언급·출처 인용·추천없음경쟁 A 공식 사이트, 언론 기사 1건
2026-10-20 10:09G-AIM-01Q012언급·추천언급출처 인용경쟁 B 공식 사이트, 업계 비교 기사 1건

위 두 줄은 양식을 보여 주기 위한 가상의 예입니다. 둘째 줄의 경쟁 B는 본문에 이름 없이 출처로만 연결된 경우입니다.

보고서에는 횟수, 분모, 조건 코드를 한 문장에 함께 적습니다. 가상의 예로 다음 문안을 따라 쓸 수 있습니다. 「2회차 G-AIM-01 조건에서 유효 답변 40건 중 자사 언급은 12건, 경쟁 A 언급은 14건입니다. 차이 2건은 질문당 반복 횟수 3회보다 작아 다음 회차와 함께 판단합니다.」

공식 도구의 숫자와 표본 결과를 섞지 않는 기준도 정합니다. Google 검색 센터 문서는 AI 기능에서 생긴 트래픽도 Search Console에 집계된다고 설명합니다. 집계 위치는 실적 보고서의 웹 검색 유형입니다.

Search Console 도움말은 실적 차트의 데이터가 속성 단위로 집계된다고 설명합니다. 속성은 자사가 등록한 사이트이므로, 이 수치로 경쟁 브랜드를 비교할 수는 없습니다. 경쟁 비교표에는 같은 방식으로 직접 조회한 표본 결과만 넣고, Search Console 수치는 자사 추이를 보는 별도 자료로 둡니다.

완료 기준: 모든 브랜드 행의 분모가 같습니다. 원자료 표에서 비율을 다시 계산했을 때 보고서와 같은 값이 나옵니다.

정리

  1. 비교할 경쟁 브랜드를 정하고, 브랜드마다 인정 표기와 제외 표기를 담은 표기 사전을 확정합니다.
  2. 브랜드 이름이 없는 질문 세트에 번호를 붙이고, 측정 기간 동안 문구를 고정합니다.
  3. 엔진·모드·모델·계정 상태·장소를 조건표에 적고, 질문마다 새 대화에서 같은 횟수로 조회합니다.
  4. 같은 답변 안에서 모든 브랜드를 언급, 출처 인용, 추천으로 나누어 판정하고, 겹치는 유형은 모두 표시합니다.
  5. 유효 답변 전체를 공통 분모로 삼아 횟수와 비율을 함께 기록하고, 다음 회차에도 같은 조건표로 조회합니다.

참고 자료

추천 콘텐츠

📊

OptiAnalytics 시작하기

AI 답변 엔진과 검색엔진이 내 사이트의 어떤 페이지를 가져가는지 측정해 보십시오.

출시 알림 받기