같은 날 여섯 병원을 쟀더니 넷이 내려갔습니다 — 먼저 측정부터 의심했습니다

2026-10-26

같은 날 측정한 여섯 병원 중 네 곳의 노출률이 내려갔다. 원인을 병원에서 찾기 전에 측정부터 세 가지로 확인했다. ① 판정 — AI 답변 원문에 병원 이름이 나온 횟수와 '노출'로 집계된 횟수가 리포트마다 정확히 일치했다. ② 실패 — 여러 병원을 같은 시각에 재면서 한 엔진에서 요청 한도 초과로 실패한 호출이 리포트당 몇 건씩 나왔지만, 전체의 1~3% 수준이라 하락 폭을 설명하지 못했다. ③ 기준 — 질문 세트와 판정 규칙은 바뀌지 않았다. 측정이 맞다는 걸 확인한 뒤에 본 원인은 엔진 쪽이었다. 내려간 병원들에서 한 엔진은 병원 홈페이지 대신 리뷰 플랫폼을 출처로 더 많이 썼다.

숫자가 내려간 리포트를 받으면 '무엇이 잘못됐나'부터 묻게 됩니다. 저희는 그 질문을 병원보다 측정에 먼저 던집니다. 측정이 흔들렸는데 병원을 고치면, 고칠 필요가 없는 것을 고치게 되기 때문입니다.

① 판정이 맞았나

노출률은 'AI 답변에 이 병원이 언급됐는가'를 질문마다 세서 만듭니다. 그래서 집계된 '노출'과 답변 원문을 직접 대조했습니다. 원문에 병원 이름이 나온 답변 수와 노출로 집계된 수가 리포트마다 정확히 같았습니다. 놓친 것도, 없는데 잡은 것도 없었습니다.

② 실패한 호출이 있었나

이날은 여러 병원을 같은 시각에 쟀습니다. 한 엔진에서 요청 한도 초과로 실패한 호출이 리포트당 몇 건씩 나왔습니다. 저희는 실패한 호출도 분모에 넣고 '노출 없음'으로 계산합니다. 엔진마다 분모가 달라지면 회차끼리 비교할 수 없기 때문입니다.

대신 실패 건수를 따로 기록해 두고, 그 영향이 얼마인지 계산합니다. 이번에는 전체 호출의 1~3% 수준이라, 많게는 10%p 넘게 움직인 하락을 설명할 크기가 아니었습니다. 실패가 많아 한 엔진의 오류가 일정 비율을 넘으면 그 회차는 추세 비교에서 빼도록 정해 두었습니다.

③ 기준이 바뀌었나

질문 세트, 판정 규칙, 집계 방식 중 하나라도 바뀌었다면 숫자는 그 자체로 움직입니다. 직전 회차 이후 바뀐 것이 없는지 기록으로 확인했습니다. 바뀐 것은 없었습니다.

그다음에 본 것 — 엔진별 출처

  • · 네 엔진이 같이 내려간 것이 아니었습니다. 내려간 병원들에서는 주로 두 엔진이 빠졌고, 오른 엔진도 있었습니다.
  • · 그중 한 엔진은 같은 질문에 답하면서 병원 홈페이지를 출처로 쓰는 횟수가 줄고, 리뷰 플랫폼을 쓰는 횟수가 늘었습니다.
  • · 이런 변화는 병원 홈페이지를 고쳐서 바로 되돌릴 수 있는 종류가 아닙니다. 그래서 리포트에서 '홈페이지에서 할 일'과 '외부 표면에서 할 일'을 나눠 봅니다.

숫자가 내려간 리포트를 받았다면

  • · 그 회차에 실패한 호출이 있었는지, 몇 건인지 확인할 수 있어야 합니다.
  • · 질문 세트나 판정 기준이 바뀌지 않았는지 확인할 수 있어야 합니다.
  • · 네 엔진이 같이 내려갔는지, 한두 엔진만 내려갔는지 나눠 볼 수 있어야 합니다.
  • · 이 세 가지가 확인되지 않는 숫자라면, 그 하락으로 무엇을 바꿀지 정하기 어렵습니다.

자주 묻는 질문

측정에 실패한 호출은 왜 '노출 없음'으로 계산하나요?

엔진마다 분모가 달라지면 회차끼리, 엔진끼리 비교가 안 되기 때문입니다. 대신 실패 건수를 따로 남기고, 실패 비율이 일정 수준을 넘으면 그 회차를 추세 비교에서 뺍니다.

노출률이 한 번 내려가면 대응을 바꿔야 하나요?

AI 답변은 회차마다 오르내림이 있습니다. 먼저 측정이 맞았는지 확인하고, 어느 엔진이 얼마나 움직였는지 나눠 본 뒤, 한 회차가 아니라 이어지는 회차의 방향으로 판단합니다.

리뷰 플랫폼 인용이 늘면 무엇을 해야 하나요?

그 플랫폼에 올라 있는 병원 정보(진료 과목, 시간, 소개)가 정확하고 최신인지부터 확인하는 것이 출발점입니다. 후기를 만들거나 대가를 주고 늘리는 방식은 하지 않습니다.

관련 글

보일리(Boily)는 ChatGPT·Claude·Gemini·Perplexity가 병원을 얼마나 추천하는지 격주로 측정·진단하고, 원하시면 GEO·AEO 정비를 대행하는 한국 병원 전용 AI 검색 노출 측정 서비스입니다. 노출·순위를 보장하지 않으며, 정비 전후를 같은 중립 측정으로 검증합니다.