결론부터.
싱가포르 호텔은 같은 곳인데도 예약 사이트마다 평점이 최대 0.8점씩 갈린다.
마리나 베이 샌즈는 트립닷컴에서 9.7점, 부킹에서 9.6점인데 아고다에서는 8.9점이다.
같은 호텔, 같은 시기, 다른 숫자.
싱가포르 호텔 31곳의 OTA별 평점을 뜯어봤다.
후한 쪽과 짠 쪽을 가르는 건 호텔 품질이 아니었다. 리뷰 개수였다.
아고다가 유독 짜다 — 31곳 중 절반이 그렇다
싱가포르에서 리뷰 1,000개 이상, 평점 8.0 이상인 호텔 31곳을 골랐다.
각 호텔의 아고다·부킹·트립닷컴·익스피디아 평점을 나란히 놓고 비교했다.
31곳 중 15곳(48%)에서 아고다 점수가 가장 낮았다.
가장 높은 OTA와 아고다의 평균 격차는 0.39점.
소수점 차이 같지만, 10점 만점에서 0.4점은 호텔 순위를 통째로 뒤집는 크기다.
격차가 0.5점을 넘는 호텔만 추려도 8곳이다.
■ 마리나 베이 샌즈 (5성)
아고다 8.9 vs 최고 9.7 | 격차 0.8
■ 요크 호텔 (4성)
아고다 8.1 vs 최고 8.9 | 격차 0.8
■ 스위소텔 더 스탬포드 싱가포르 (5성)
아고다 8.8 vs 최고 9.4 | 격차 0.6
■ 칼튼 호텔 싱가포르 (5성)
아고다 8.6 vs 최고 9.1 | 격차 0.5
■ 팬 퍼시픽 싱가포르 (5성)
아고다 8.9 vs 최고 9.4 | 격차 0.5
후한 평점 뒤에는 항상 '적은 리뷰'가 있다
핵심은 여기다.
어느 OTA가 높은 점수를 줬는지 보면 규칙이 드러난다.
마리나 베이 샌즈를 숫자로 다시 보자.
마리나 베이 샌즈
아고다 8.9점 — 리뷰 4만 8천 개
부킹 9.6점 — 리뷰 1만 6천 개
트립닷컴 9.7점 — 리뷰 1,900개
가장 높은 9.7점은 리뷰가 가장 적은 트립닷컴에서 나왔다.
가장 낮은 8.9점은 리뷰가 가장 많은 아고다에서 나왔다.
우연이 아니다.
스위소텔 더 스탬포드 싱가포르
아고다 8.8점 — 리뷰 2만 900개
익스피디아 9.4점 — 리뷰 1,028개
2만 개가 만든 8.8점과 1,000개가 만든 9.4점.
어느 쪽이 더 진짜에 가까울까.
요크 호텔
아고다 8.1점 — 리뷰 3만 개
트립닷컴 8.9점 — 리뷰 904개
격차 0.8점. 표본 차이는 더 벌어진다.
8.9점을 만든 후기는 904개, 8.1점을 만든 후기는 3만 개다.
33배 많은 표본이 가리키는 쪽은 8.1점이다.
표본이 작을수록 평점은 극단으로 튄다.
리뷰 1,000개짜리 9.4점은 유난히 만족한 손님이 조금만 몰려도 나오는 숫자다.
리뷰 2만 개짜리 8.8점은 그런 우연이 씻겨나간 뒤에 남은 값이다.
표본이 커질수록 평균이 참값에 수렴한다.
호텔 평점도 이 원리에서 벗어나지 않는다.
물론 리뷰 수만이 이유는 아니다.
OTA마다 평점 척도와 이용자층이 다르다.
트립닷컴은 중화권, 아고다는 아시아권 예약자 비중이 크다.
그래도 같은 호텔에서 방향이 이 정도로 일정하다면, 표본 크기를 무시할 수 없다.
그럼 어느 평점을 믿어야 하나
실용적인 규칙은 하나다.
평점 숫자보다 그 옆의 리뷰 개수를 먼저 본다.
리뷰 4만 8천 개의 8.9점이, 리뷰 1,900개의 9.7점보다 믿을 만하다.
9.7이라는 숫자에 끌리기 전에, 그 점수가 몇 명의 후기로 만들어졌는지 확인하는 게 순서다.
표본이 크면서도 점수가 높은 호텔이 진짜 강자다.
■ 마리나 베이 샌즈
아고다 8.9 | 리뷰 4만 8천 개 | 1박 약 122만원
■ 파라독스 싱가포르 머천트 코트 앳 클라크 키
아고다 8.9 | 리뷰 1만 6천 개 | 1박 약 27만원
■ 칼튼 호텔 싱가포르
아고다 8.6 | 리뷰 4만 5천 개 | 1박 약 28만원
같은 8.9점이라도 마리나 베이 샌즈는 1박 122만원, 파라독스는 27만원이다.
표본이 충분한 8.9점을 기준으로 보면, 값이 4분의 1인 파라독스 쪽 가성비가 두드러진다.
OTA별 평점이 갈리는 다른 싱가포르 호텔은 hotelping.net에서 리뷰 수까지 함께 볼 수 있다.
정리하면, 평점은 절대 숫자가 아니라 표본 위에 서 있는 값이다.
9.7점이 8.9점을 이기는 게 아니라, 1,900명이 4만 8천 명을 이길 수 없는 것이다.
다음에 호텔을 고를 때는 점수 옆의 괄호부터 본다.
그 안의 리뷰 개수가 점수의 무게를 정한다.