AI 답변 속 출처 인용률 계산법

대상 출처와 답변 단위의 계산 기준

마케팅 담당자는 집계 전에 대상 출처의 범위를 문서로 정합니다. 회사가 운영하는 웹사이트 전체를 대상으로 할지, 특정 서비스 설명이나 공개 자료만 대상으로 할지 명시합니다. 외부에 게재된 회사 관련 자료도 포함하려면 해당 자료를 대상 목록에 따로 기재합니다. 회사 이름이 등장했다는 이유만으로 그 답변을 출처 인용으로 인정하지 않습니다.

계산 단위는 출처나 페이지가 아닌 관측 답변입니다. 같은 답변에 대상 페이지가 여럿 인용되어도 분자에 더하는 것은 해당 답변 한 건입니다. 담당자는 답변마다 식별값을 부여하고, 인용된 페이지 목록은 그 답변에 연결된 부속 기록으로 관리합니다. 이렇게 하면 답변 인용률과 페이지별 인용 횟수를 서로 다른 항목으로 계산할 수 있습니다.

인용 표시와 관련 링크의 인정 범위

오픈에이아이는 챗GPT의 출처 목록에 인용된 출처와 그 밖의 관련 링크가 함께 포함될 수 있다고 설명합니다. 따라서 담당자는 목록에 회사 자료가 있다는 사실만으로 인용 판정을 내리지 않습니다. 답변의 인용 표시가 해당 자료를 가리키는지, 단순한 관련 자료로 제시되었는지 기록에서 따로 표시합니다.

구글은 제미나이가 답변 안이나 아래에 출처와 관련 콘텐츠를 표시할 수 있으며, 링크를 제공하지 않는 답변도 있다고 안내합니다. 회사는 버튼 이름만으로 모든 링크에 같은 판정을 적용하지 않고, 실제 표시에서 인용 관계를 식별할 수 있는지를 기준으로 삼습니다. 자료는 읽을 수 있지만 인용인지 관련 링크인지 가릴 수 없다면 판정 불가로 남깁니다. 회사에 유리한 해석을 선택해 분자에 포함하지 않습니다.

출처 없는 답변은 표시를 읽지 못한 답변과 다르게 처리합니다. 답변과 출처 영역을 모두 확보했고 인정할 인용 표시가 없다면 분모에 포함합니다. 반대로 출처 영역이 잘렸거나 열리지 않아 판정에 필요한 자료가 빠졌다면 제외 사유를 기록합니다. 담당자는 자료 부재와 인용 부재를 같은 상태로 입력하지 않습니다.

담당자가 준비할 자료와 입력 순서

담당자는 대상 출처 목록, 관측 답변 원문, 출처 표시를 읽을 수 있는 기록, 답변별 판정표를 준비합니다. 대상 목록에는 자료 제목과 관리 주체를 기재하고, 비슷한 이름의 다른 자료와 혼동하지 않도록 식별 정보를 추가합니다. 답변 기록에는 관측 당시 표시된 내용을 보존하며, 추출한 판정 결과만 남기지 않습니다.

1. 대상 출처의 포함 범위와 답변 단위 집계 원칙을 확정하고 판정표에 적용할 기준을 기재합니다.
2. 답변 식별값마다 대상 출처 표시를 읽고 인용 인정, 인용 없음, 판정 불가 중 해당 상태를 입력합니다.
3. 수집 실패와 판정 불가 기록을 분리한 뒤 분모에 포함할 답변과 분자에 포함할 답변을 집계합니다.
4. 인용 답변 수를 판정 가능 답변 수로 나누고 백을 곱해 백분율로 표현합니다.

입력표는 한 답변의 판정 근거와 분모 처리 이유를 함께 읽을 수 있게 만듭니다. 다음 표의 상태 설명은 입력 방식을 보여 주는 항목이며 실제 관측 결과가 아닙니다. 답변 식별값은 수집 기록에서 가져오고, 빈칸을 임의의 답변이나 수치로 채우지 않습니다.

분자와 분모의 집계 결과

분자는 대상 출처를 인용했다고 판정한 답변 수이고, 분모는 인용 여부를 판정할 수 있는 전체 답변 수입니다. 계산식은 ‘대상 출처 인용 답변 수 ÷ 전체 판정 가능 답변 수 × 백’으로 기재합니다. 담당자는 분자에 들어간 모든 답변이 분모에도 포함되어 있는지 대조합니다. 인용 횟수를 분자에 입력하면 답변 단위 계산이 성립하지 않으므로 집계 항목 이름도 함께 읽습니다.

집계 결과에는 관측 조건, 판정 가능 답변 수, 대상 출처 인용 답변 수, 답변 인용률을 함께 기재합니다. 수집 실패와 판정 불가 수는 제외 내역으로 각각 기록합니다. 판정 가능한 답변이 전혀 없다면 인용률을 계산하지 않고 계산 불가로 표시합니다. 보고할 때는 인용률만 떼어 전달하지 말고 계산에 사용한 답변 범위와 제외 내역도 함께 전달합니다.

플랫폼 총인용 횟수와의 차이

빙은 웹마스터 도구의 총인용 횟수가 선택한 기간에 AI 답변의 출처로 표시된 인용을 집계한다고 설명합니다. 이 지표는 특정 답변 안에서 출처가 어떤 위치나 형태로 제시되었는지를 알려 주지 않습니다. 회사가 직접 계산하는 답변 인용률은 판정 가능한 관측 답변을 분모로 사용하므로, 플랫폼의 총인용 횟수와 계산 대상 및 단위가 다릅니다.

담당자는 플랫폼 집계값을 직접 관측한 답변 수로 나누지 않습니다. 두 자료가 같은 답변 집합을 다룬다는 근거 없이 결합하면 계산식의 분자와 분모가 서로 다른 범위를 가리키게 됩니다. 플랫폼 자료는 해당 지표의 이름으로 기록하고, 직접 계산한 값은 회사 관측 답변 인용률로 표기합니다. 보고서에서 두 값을 함께 제시하더라도 하나의 산식으로 합치지 않습니다.

집계에서 자주 발생하는 오류

대상 출처가 여러 개인 답변에서 페이지마다 행을 만들었다면 답변 수를 집계하기 전에 식별값으로 묶어야 합니다. 페이지별 행을 그대로 세면 인용 자료가 많은 답변에 더 큰 비중을 부여하게 됩니다. 담당자는 답변 판정표와 페이지 기록을 따로 관리하고, 답변 판정표에서만 분자와 분모를 계산합니다.

자동 추출 결과에 링크가 있다는 이유로 인용 인정 상태를 일괄 입력하지 않습니다. 추출 결과가 관련 자료까지 포함한다면 사람이 인용 표시와 연결된 항목을 가려야 합니다. 추출 도구가 읽지 못한 표시도 실제 화면 기록에는 존재할 수 있으므로, 미추출 상태를 곧바로 인용 없음으로 처리하지 않습니다. 화면 기록까지 부족하면 판정 불가 사유에 누락된 자료를 기재합니다.

제외 기록은 삭제하지 않고 집계 자료와 함께 보존합니다. 담당자는 수집 실패 사유를 읽고 재수집이 필요한 항목을 정하며, 판정 불가 항목에는 판단을 마치는 데 필요한 자료를 기재합니다. 이후 상태가 확정되면 변경된 판정과 근거를 기록하고 집계 결과를 다시 계산합니다.

대상 자료의 소유권 변경 처리

대상 자료의 운영 주체가 변경되면 현재 소유 관계만으로 과거 판정을 일괄 수정하지 않습니다. 담당자는 관측 당시 적용한 대상 목록을 보존하고, 변경 이후 사용할 목록에는 적용 시점을 기재합니다. 이전 답변을 새 범위로 다시 계산할 필요가 있다면 기존 집계와 재집계를 각각 보관합니다.

자료 제목이 같아도 운영 주체가 다르면 대상 여부를 다시 판단해야 합니다. 이전 대상에서 제외된 자료를 계속 포함하거나 새로 확보한 자료를 과거부터 회사 출처였던 것처럼 처리하지 않습니다. 대상 목록의 변경 사유를 남기면 보고서 수치를 다시 설명할 때 적용 범위를 추적할 수 있습니다.

자주 묻는 질문

출처 제목이 줄임말로 표시되면 인용으로 인정합니까?

표시된 제목만으로 판단하기 어렵다면 연결된 자료의 식별 정보를 이용해 대상 목록과 대조합니다. 줄임말이 같다는 이유만으로 인정하지 않으며, 어느 자료인지 확정할 수 없으면 해당 항목을 판정 불가로 기록합니다.

답변에 포함된 이미지의 출처도 인용률에 넣습니까?

회사가 이미지 출처까지 측정하려는 경우에는 문자 자료와 다른 출처 유형으로 기록할 수 있습니다. 문자 자료의 인용만 집계하기로 했다면 이미지 출처는 별도 기록으로 남기며, 집계 도중 포함 범위를 임의로 확대하지 않습니다.

회사 자료를 인용하면서 비판한 답변도 포함합니까?

출처 인용 인정 조건을 충족하면 답변의 평가 방향과 관계없이 포함합니다. 부정적인 평가를 이유로 해당 답변을 빼면 인용 여부를 측정하는 계산에 평가자의 선호가 개입하므로, 평가 내용은 별도 항목에 기재합니다.

계산 결과의 소수 자릿수는 어떻게 정해야 합니까?

보고서에서 사용할 반올림 규칙을 내부적으로 정하고 동일한 집계에는 같은 규칙을 적용합니다. 표시용 결과를 반올림하더라도 계산에 사용한 원래 답변 수는 보존하며, 반올림한 인용률을 후속 계산의 입력값으로 사용하지 않습니다.

대상 출처별 인용률을 더하면 전체 인용률이 됩니까?

같은 답변이 여러 대상 출처를 인용할 수 있으므로 출처별 인용률을 단순히 더하지 않습니다. 전체 값을 계산할 때는 대상 출처 가운데 어느 하나라도 인용한 답변의 식별값을 모으고, 겹치는 답변은 한 번만 집계합니다.

이어서 읽을 주제

병원 블로그 성과를 이어 읽으면 콘텐츠 성과 보고에서 출처 인용 기록과 방문·행동 기록이 각각 어떤 질문에 답하는지 이해하는 데 도움이 됩니다. 서로 다른 측정 항목을 하나의 성과로 합치기 전에 보고 목적에 맞는 해석 범위를 정할 수 있습니다.