결론부터 말하면, 모바일 환자경험평가 조사는 전화조사처럼 면접관이 환자 상태를 보고 조사 전에 대상을 걸러내는 방식이 아니라, 응답을 모두 받은 뒤 통계적 기준으로 불성실한 응답을 걸러내는 방식을 쓴다. 걸러내는 시점과 방법이 다를 뿐이지 신뢰도가 낮다는 뜻은 아니며, 오히려 사람의 주관이 끼어들지 않아 동일규모 병원과 비교하기에 더 적합한 데이터가 쌓인다.
심평원 전화 조사는 조사자가 환자의 목소리와 의사소통 가능 상태를 듣고 주관적으로 판단해 조사 대상에서 미리 제외한 뒤, 정해진 표본 수가 찰 때까지 조사를 이어간다. 다만 이 과정에 면접관의 개입이 있다 보니 모든 조사자가 동일한 판단 기준을 적용하기 어렵고, 사람마다 기준이 달라지면 조사 간 객관성도 흔들릴 수 있다. 반면 모바일 조사는 참여 자체를 막지 않고 응답을 모두 받은 뒤, 동일한 점수를 반복해서 찍었는지 응답 시간이 지나치게 짧은지 등 통계적 기준으로 불성실 응답을 가려내 제외한다. PEI도 일반적인 이상치 선별 방법을 적용해 이런 응답을 걸러낸다.
여기에 더해 평균은 표본수가 많아질수록 극단적인 응답 하나가 미치는 영향이 줄어드는 특성이 있다. 짧은 기간 한 번에 모은 표본보다 상시로 꾸준히 쌓인 표본일수록, 걸러내지 못한 소수의 불성실 응답이 섞여도 전체 평균이 크게 흔들리지 않는다는 뜻이다. 그래서 데이터 신뢰도를 점검할 때는 불성실 응답을 걸러내는 기준뿐 아니라 표본이 충분히 쌓였는지도 함께 봐야 한다.
개선 방안은 여러 가지가 있지만, 그 출발점은 결국 우리 병원의 현재 위치를 진단하는 것이고, 진단의 핵심은 걸러낸 데이터로 동일규모 병원 평균과 비교해 문항별 위치를 확인하는 것이다. 진단 방법은 두 가지를 함께 써야 한다. 심평원 환자경험평가 결과는 공식 결과이지만 정해진 평가 기간(6개월)과 표본으로 조사된 기간 한정 자료이고, PEI 상시 조사는 동일규모 평균 대비 문항별 현황을 지속적으로 확인할 수 있다. 데이터가 믿을 만한지부터 확인해야, 그다음 정확한 진단 → 원인 파악 → 개선이라는 순서가 의미를 갖는다.
결국 불성실 응답을 어떻게 거르느냐 자체보다 중요한 것은, 걸러낸 뒤 남은 데이터를 동일규모 병원과 꾸준히 비교하는 체계를 갖추고 있느냐다. 처음 모바일 조사를 도입할 때 데이터 신뢰도를 걱정하는 경영진·QPS팀이 많지만, 걸러내는 기준과 표본 누적 구조만 확인되면 그 걱정은 실제 진단 결과를 빠르게 얻는 쪽으로 옮겨간다.