AI 답변 언급률
AI Mention Rate
AI 답변 언급률은 수집한 유효 답변 가운데 측정 대상의 이름 또는 사전에 승인한 별칭이 실제 사용자 대상 답변 텍스트에 한 번 이상 나타났는지를 모델·질문·시점 조건을 보존한 채 답변별로 판정한 비율입니다. 분모는 질문 수가 아니라 판정 가능한 유효 답변 수입니다.
AI 보조 조사·작성 후 원문과 대조한 설명입니다. 사례·계산은 별도 출처 표기가 없는 한 이해를 위한 가상 예시이며 실제 고객 성과가 아닙니다.
분자와 분모를 어떻게 정의하나요?
산식은 대상 언급이 확인된 유효 답변 수 ÷ 전체 유효 답변 수 × 100입니다. OpenAI 웹 검색 문서는 검색 도구 호출 항목과 사용자가 보는 message 답변을 구분합니다. 검색 호출이 완료돼도 message가 오류·빈 결과라면 답변 언급을 판정할 수 없으므로 유효 답변 분모에 넣지 않습니다.
가상 40개 답변은 어떻게 계산하나요?
가상 측정에서 실행 50건 중 6건은 오류, 4건은 답변 텍스트가 없어 유효 답변이 40건이라고 가정합니다. 이 중 승인 이름 또는 별칭이 실제 답변에 나온 답변이 12건이면 언급률은 12 ÷ 40 × 100 = 30%입니다. 한 답변에서 이름이 세 번 나와도 분자는 답변 1건이며 경쟁사 이름만 나온 답변은 대상 언급으로 세지 않습니다.
판정표 필드
- 실행 ID와 질문 ID
- 모델·기능·지역·언어·시각
- 유효 답변 여부와 제외 사유
- 일치한 대표 이름 또는 승인 별칭
- 원문 위치와 자동·수동 판정 상태
별칭과 판정 기준은 언제 고정하나요?
OpenAI 평가 문서는 테스트 입력의 데이터 구조와 출력 판정 기준을 먼저 정의하고 실행 결과를 분석하도록 설명합니다. 측정 뒤 새 별칭을 추가해 과거 답변을 유리하게 재분류하면 기준선이 바뀝니다. 오탈자, 동명이의어, URL에만 포함된 이름과 부정 문맥을 어떻게 처리할지 첫 실행 전에 정하고 변경 버전을 남깁니다.
답변율과 질문 커버리지와 무엇이 다른가요?
답변율은 실행 가운데 유효 답변이 생성된 비율이고 언급률은 유효 답변 중 대상이 나온 비율입니다. 질문 커버리지는 추적 질문 중 정한 성공 조건을 충족한 질문 비율이므로 반복 실행이 많아도 질문 분모는 늘지 않습니다. 모델·프롬프트·지역·기간이 바뀐 수치를 그대로 연결하거나 언급을 추천·인용·정확성으로 해석하지 않습니다.
자주 묻는 질문
- 상태가 completed이면 유효 답변인가요?
- 아닙니다. 수집·도구 호출 완료와 실제 판정 가능한 사용자 답변 텍스트 존재를 구분해야 합니다.
- 한 답변에 브랜드가 여러 번 나오면 여러 건인가요?
- 답변 단위 언급률에서는 한 답변을 한 건으로 셉니다. 빈도 지표가 필요하면 별도 산식으로 보고합니다.
출처와 확인 범위
- Web search · OpenAI · 확인 2026-10-27
웹 검색 사용 결과는 web_search_call과 답변 message로 나뉘며 답변 텍스트의 URL 인용은 annotations에, 전체 검색 자료는 sources 필드에 따로 제공될 수 있습니다.
확인 범위: 표시한 절의 정의·플랫폼 동작·데이터 구조·평가 조건만 사용했습니다. 시장 전체 효과, 검색 순위, AI 답변 언급·인용·추천·클릭과 처리 기간 보장은 지원하지 않습니다.
- Evaluations · OpenAI · 확인 2026-10-27
평가는 수행할 작업을 정의하고 프롬프트·입력 자료로 실행한 뒤 결과를 분석하는 절차이며 테스트 데이터 스키마와 판정 기준을 명시해야 합니다.
확인 범위: 표시한 절의 정의·플랫폼 동작·데이터 구조·평가 조건만 사용했습니다. 시장 전체 효과, 검색 순위, AI 답변 언급·인용·추천·클릭과 처리 기간 보장은 지원하지 않습니다.