같은 질문을 두 번 물으면 답이 다릅니다 — 한 번 봐서는 모릅니다

2026-09-17

AI 답변은 실행마다 달라집니다. 같은 질문을 다시 던지면 언급되는 병원이 바뀌기도 하고, 어제 나오던 곳이 오늘 빠지기도 합니다. 그래서 한 번 물어본 결과는 현황이 아니라 표본 하나입니다. 노출을 판단하려면 같은 질문을 여러 개, 여러 엔진에, 반복해서 던져 비율로 봐야 하고, 그 비율을 일정한 주기로 이어야 변화가 보입니다. 한 번의 결과에 일희일비할 필요가 없는 이유이기도 합니다.

“어제는 우리 병원이 나왔는데 오늘은 안 나오네요.” 자주 듣는 말이고, 대부분 병원이 잘못한 게 아닙니다.

왜 답이 달라지나

· AI는 답을 만들 때마다 문장을 새로 생성합니다. 같은 근거를 봐도 어떤 곳을 예로 들지가 매번 똑같지는 않습니다.
· 많은 엔진이 답하기 전에 웹을 검색합니다. 그때 검색 결과가 조금만 달라도 인용되는 곳이 바뀝니다.
· 질문의 사소한 차이(띄어쓰기, 어순, 앞선 대화)도 결과를 바꿉니다.

그래서 한 번 확인은 표본 하나다

직접 한 번 물어보고 “안 나온다”고 결론 내리면 실제보다 나쁘게, “나온다”고 결론 내리면 실제보다 좋게 보게 됩니다. 둘 다 틀릴 수 있습니다.

필요한 것은 한 번의 답이 아니라 비율입니다. 여러 질문을 여러 엔진에 던져 그중 몇 번 언급되는지를 봐야 현황에 가까워집니다.

주기를 벌리는 이유

짧은 간격으로 재면 변화의 상당 부분이 이 흔들림입니다. 올랐다 내렸다 하는 숫자를 보고 원인을 찾으면 대개 없는 원인을 찾게 됩니다.

보일리가 매주가 아니라 격주로 재는 것도 같은 이유입니다. 간격을 벌리면 흔들림보다 실제 변화가 더 크게 드러납니다.

숫자를 읽을 때의 기준

· 한 회차의 오르내림보다 여러 회차의 방향을 봅니다.
· 총합 하나로 보지 말고 엔진별로 나눠 봅니다. 한 엔진이 끌어올린 상승은 다른 엔진의 0을 가립니다.
· 측정 조건(질문 세트·엔진·주기)이 같은 구간끼리만 비교합니다.

자주 묻는 질문

제가 직접 물어봤을 때랑 리포트 숫자가 다릅니다. 왜 그런가요?

AI 답변은 실행마다 달라지기 때문입니다. 리포트는 한 번의 답이 아니라 여러 질문을 4개 엔진에 던진 결과의 비율이라, 한 번 물어본 결과와 다를 수 있습니다. 어느 쪽이 틀린 것이 아니라 보는 단위가 다릅니다.

그럼 노출률을 믿을 수 있나요?

한 회차의 소수점보다 여러 회차의 방향을 보시는 편이 맞습니다. 같은 질문 세트를 같은 주기로 반복하기 때문에 회차 간 비교는 의미가 있고, 그 추세가 판단의 근거가 됩니다.

왜 매주가 아니라 격주인가요?

매주 재면 변화의 대부분이 실행마다 생기는 흔들림입니다. 간격을 벌리면 흔들림 대비 실제 변화가 더 잘 보입니다.

보일리(Boily)는 ChatGPT·Claude·Gemini·Perplexity가 병원을 얼마나 추천하는지 격주로 측정·진단하고, 원하시면 GEO·AEO 정비를 대행하는 한국 병원 전용 AI 검색 노출 측정 서비스입니다. 노출·순위를 보장하지 않으며, 정비 전후를 같은 중립 측정으로 검증합니다.