AI는 왜 매번 다른 업체를 추천할까
ChatGPT에 “근처에 믿을 만한 자동차 정비소 있어?”라고 물었더니 우리 가게를 추천해 줍니다. 기분이 좋아서 스크린샷을 찍어 둡니다. 다음 날 친구가 같은 질문을 했는데, 목록에 우리 가게가 없습니다. 두 결과 모두 진짜입니다. 기존 검색 엔진과 달리 AI 검색에는 고정된 “순위”가 없습니다.
답변이 달라지는 이유
- 답변 생성에는 원래 무작위성이 있습니다. 언어 모델은 여러 후보 단어 중에서 확률에 따라 단어를 하나씩 고릅니다. 같은 질문이라도 표현과 나열되는 업체 이름이 매번 다를 수 있습니다.
- 매번 다른 웹페이지를 찾습니다. 검색 기능이 있는 AI는 답하기 전에 웹페이지를 찾아봅니다. 어떤 키워드로 검색하고 어떤 결과를 열어 보는지가 매번 다를 수 있고, 다른 자료를 읽으면 다른 결론에 이릅니다.
- 묻는 사람이 다릅니다. 위치, 언어, 이전 대화, 메모리 기능을 켰는지 여부가 모두 답변에 영향을 줍니다.
- 질문 표현이 조금씩 다릅니다. “어디가 좋아요?”, “어디가 저렴해요?”, “아이들한테 좋은 곳은요?”는 각각 다른 목록을 받습니다.
- 모델과 인덱스는 계속 업데이트됩니다. 다음 달이면 답변을 만드는 모델도, 모델이 찾는 페이지도 바뀌어 있을 수 있습니다.
그러니 결과 하나로 판단하지 마세요
“AI가 우리 가게를 추천했다”는 스크린샷도, “AI가 추천하지 않았다”는 스크린샷도 그것만으로는 아무것도 증명하지 못합니다. 중요한 것은 여러 번 물어본 뒤의 비율입니다.
언급률 = 우리 가게를 언급한 답변 수 ÷ 전체 답변 수
예를 들어 질문 10개를 각각 3번씩 물으면 답변이 30개 나옵니다. 그중 6개가 우리 가게를 언급했다면 언급률은 20%입니다.
언급률 읽는 법
- 추정치입니다. 답변 30개로 얻은 20%는 다른 30개로 다시 재면 13%가 나올 수도, 27%가 나올 수도 있습니다. 차이가 뚜렷할 때만 결론을 내리세요.
- 엔진별로 따로 보세요. 어떤 AI에서는 자주 나오는데 다른 AI에서는 전혀 안 나올 수 있습니다. 엔진마다 쓰는 검색 출처가 다르기 때문입니다.
- 질문별로 따로 보세요. 전체 20%라는 수치는, 질문 2개에서는 매번 언급되고 나머지 8개에서는 한 번도 언급되지 않았다는 뜻일 수도 있습니다. 이쪽이 평균보다 더 쓸모 있습니다. AI가 우리 가게를 어떤 고객에게 맞는 곳으로 보는지 알려 주기 때문입니다.
- 경쟁 업체와 비교하세요. 같은 답변들 속에서 경쟁 업체가 얼마나 자주 나오는지가 우리 가게의 수치 하나보다 현재 위치를 더 잘 보여 줍니다.
- 추세를 보세요. 시간이 지난 뒤 같은 질문으로 다시 테스트하세요. 어떤 한 수치보다 변화의 방향이 더 중요합니다.
“노출 보장”은 의심하세요
답변 자체가 계속 바뀌기 때문에, 누구도 AI가 특정 업체를 추천하도록 보장할 수 없고, “1위”를 보장할 수도 없습니다. 할 수 있는 일은 언급될 가능성을 높이는 것입니다. AI가 웹사이트를 읽을 수 있게 하고, 웹사이트에 우리 가게가 누구인지, 어디에 있는지, 누구를 대상으로 하는지 분명히 쓰고, 신뢰할 만한 다른 웹사이트에도 우리 가게 정보가 똑같이 올라가 있도록 하세요. 그런 다음 다시 테스트해 언급률이 달라졌는지 확인하세요.
저희 무료 점검 리포트에도 언급률이 나오며, 모든 답변의 원문이 함께 들어 있어 직접 확인하실 수 있습니다.
지금 우리 가게의 언급률이 궁금하신가요? 무료 점검이 질문 10개를 AI 3곳에 각각 3회씩 대신 물어 드립니다.
무료 점검 신청하기