AI는 우리 홈페이지를 인용하고도 왜 다르게 말할까?

인용됐다는 사실보다 중요한 것은 AI가 원문을 답변에 어떻게 반영했는지다.

AI 답변에 우리 홈페이지가 출처로 표시됐다고 해서 원문이 그대로 전달된 것은 아니다. 실제 반영 정도를 계산하는 방법에서는 원문 표현의 일치가 20%에 불과하다. 같은 질문에서도 챗GPT와 제미나이가 같은 웹사이트를 인용한 비율은 6.1%에 그쳤다.

인용은 원문을 그대로 옮기는 일이 아니라 필요한 내용을 골라 답변으로 다시 만드는 일이다.

“인용됐으면 우리 글을 그대로 읽은 것 아닌가?”

인용에는 두 가지 단계가 있다. 먼저 AI가 어떤 페이지를 출처로 고르는 과정이 있고, 그다음 고른 페이지의 내용을 실제 답변에 얼마나 반영하는지를 보는 과정이 있다.

두 번째 과정을 측정한 프레임워크는 다섯 가지 요소를 합쳐 반영 정도를 계산한다. 이 조사는 검색 질문 602개를 세 개 AI 검색에 넣고, 인용 21,143건과 인용 특성 기록 23,745건, 실제로 수집된 페이지 18,151개를 분석했다.

구성 요소가중치무엇을 재는가
인용 횟수(최대 3회로 정규화)20%답변 안에서 몇 번 언급됐는가
문서 내 위치15%답변 앞쪽에 등장했는가
문단 커버리지20%답변의 여러 문단에 걸쳐 쓰였는가
의미 유사도(단어 빈도 기반)25%답변 주제와 원문 주제가 겹치는가
문구 일치(2~3단어 연속)20%원문 표현을 그대로 옮겼는가

여기서 눈여겨볼 부분은 문구 일치다. 원문 표현을 그대로 가져왔는지를 보는 항목이지만 비중은 20%다. 나머지는 인용 횟수, 문서 안의 위치, 여러 문단에 걸쳐 쓰였는지, 의미가 얼마나 겹치는지를 본다.

그래서 홈페이지에 있는 문장을 그대로 복사하지 않아도 원문의 내용이 답변에 반영될 수 있다. 반대로 인용 표시가 붙어 있어도 원문의 중요한 사실이 그대로 전달됐다고 단정할 수 없다.

“그런데 왜 AI마다 답변이 다를까?”

가장 큰 이유 가운데 하나는 인용하는 웹사이트 자체가 다르다는 점이다. 같은 질문을 하더라도 AI마다 참고하는 페이지가 다르면 답변에 들어가는 정보도 달라질 수 있다.

여섯 달치 데이터를 분석한 별도 조사에서는 챗GPT와 제미나이가 같은 웹사이트를 인용한 비율이 6.1%였다. 같은 회사의 자매 사이트까지 넓혀도 겹침은 30.3%였고, 인용된 웹사이트의 79.6%는 다섯 개 AI 검색 중 한 곳에만 등장했다.

비교 대상겹침 비율
챗GPT-제미나이 같은 웹사이트 인용6.1%
같은 회사(자매 사이트 포함) 인용30.3%
인용된 사이트가 한 엔진에만 등장79.6%

이 조사는 2026년 1월부터 6월까지 챗GPT, 제미나이, 퍼플렉시티, 구글 AI 개요, 구글 AI 모드의 답변 111만 5천 개 질문과 인용 2,275만 건, 웹사이트 44만 1,946개를 분석한 결과다.

따라서 같은 홈페이지를 알고 있더라도 AI가 선택한 다른 자료와 결합하는 방식에 따라 답변은 달라질 수 있다. 인용된 홈페이지의 문장만 보고 AI 답변 전체를 판단하기 어려운 이유다.

“인용을 많이 하는 AI가 우리 글을 더 많이 쓰는 것 아닌가?”

인용 개수도 답변에 우리 글이 얼마나 반영됐는지를 보여주는 기준은 아니다. 8월 조사에서는 답 하나당 평균 인용 수가 퍼플렉시티 19.8건, 제미나이 7.8건, 챗GPT 4.0건으로 차이가 났다.

하지만 출처를 하나 이상 표시한 답변의 비율은 각각 100%, 69.5%, 66.8%였다. 인용하는 양과 출처를 표시하는 비율의 순서가 같지 않다는 점을 볼 수 있다.

엔진답 하나당 평균 인용출처 하나 이상 표시 비율
퍼플렉시티19.8건100%
제미나이7.8건69.5%
챗GPT4.0건66.8%

인용이 많다는 것은 많은 출처가 답변에 표시됐다는 뜻이다. 그것만으로 특정 홈페이지의 내용이 실제 답변 문장에 얼마나 깊게 반영됐는지는 알 수 없다.

사장님 입장에서는 홈페이지가 몇 번 인용됐는지만 보는 것보다, 고객이 실제로 묻는 질문을 AI에 넣고 어떤 사실로 답하는지를 확인하는 편이 중요하다.

“동네 가게 정보는 왜 더 다르게 나올까?”

동네 가게 정보는 홈페이지 하나만 참고해서 답을 만드는 상황이 아닐 수 있다. 다른 조사에서는 자동차, 소비자 전자제품, 소프트웨어 업종을 비교했을 때 미국 기준 제3자 자료의 비중이 각각 81.9%, 92.1%, 72.7%로 나타났다.

업종캐나다미국
자동차69.1%81.9%
소비자 전자제품77.6%92.1%
소프트웨어74.2%72.7%

같은 조사에서는 로컬 서비스 업종에서 AI 검색과 일반 검색이 인용하는 도메인의 겹침이 20%를 넘지 못했다. AI가 홈페이지뿐 아니라 뉴스, 리뷰, 커뮤니티 같은 다른 자료를 함께 참고하면 홈페이지에 적힌 표현과 답변의 표현이 달라질 수 있다.

특히 가격, 영업시간, 서비스 범위처럼 고객이 실제로 묻는 정보는 답변에서 다르게 요약되면 바로 문제가 된다. 그래서 홈페이지에 정보를 적어두는 것에서 끝내지 않고 AI가 어떤 내용으로 받아들이는지도 확인할 필요가 있다.

“인용이 붙어도 잘못 요약될 수 있나?”

가능하다. 뉴스 답변을 대상으로 한 조사에서는 AI 답변의 45%에서 사실관계, 인용, 구분 가운데 하나 이상에 중대한 문제가 있었고, 어떤 형태로든 문제가 있었던 답변은 81%였다.

항목수치
중대한 문제가 있는 답변45%
어떤 형태로든 문제가 있는 답변81%
출처 표시 문제(제미나이)76%
조사 표본응답 3,000건·14개 언어·22개 방송사·18개국

이 조사는 뉴스 답변을 대상으로 했다는 점은 구분해서 봐야 한다. 다만 인용 표시가 있다는 사실만으로 답변의 모든 내용이 원문과 정확하게 일치한다고 볼 수 없다는 점은 확인할 수 있다.

동네 가게 정보에서도 가격이나 영업시간처럼 사실 확인이 필요한 내용이 어떻게 요약되는지 따로 살펴볼 필요가 있다. 인용 여부와 실제 내용의 반영 여부는 서로 다른 문제이기 때문이다.

“그럼 홈페이지에서 무엇을 바꿔야 하나?”

핵심은 문장을 예쁘게 쓰는 것만이 아니다. 가격, 조건, 수치처럼 중요한 사실을 명확하게 적고, 필요한 정보를 여러 문단에서 분명하게 설명하는 것이 중요하다.

측정 프레임워크에서도 문구 일치는 20%지만 문서 내 위치, 문단 커버리지, 의미 유사도, 인용 횟수 같은 요소가 함께 반영된다. 따라서 홈페이지가 인용됐다는 사실 하나만 확인하기보다 실제 질문을 넣었을 때 어떤 내용이 답변으로 나오는지를 함께 살펴봐야 한다.

결국 확인해야 할 것은 “우리 홈페이지가 인용됐나?”에서 끝나지 않는다. “인용된 내용이 고객에게 어떤 사실로 전달됐나?”까지 봐야 한다.

요점 ① 인용 반영 정도는 5개 요소로 계산되며, 원문 문구 일치의 가중치는 20%다. ② 챗GPT와 제미나이의 같은 웹사이트 인용 겹침은 6.1%였고, 한 엔진에만 등장한 사이트는 79.6%였다. ③ 답 하나당 평균 인용은 퍼플렉시티 19.8건, 제미나이 7.8건, 챗GPT 4.0건이었다. ④ 뉴스 답변 조사에서는 45%가 중대한 문제를 보였고, 어떤 형태로든 문제가 있는 답변은 81%였다.

같이 읽을 글

자료 출처

작성일

#측정 #GEO #인용 #요약왜곡 #흡수점수

← 칼럼 목록
무료로 신청하기→