NPS가 업계 평균보다 낮으면 고객 경험도 나쁠까

자사 NPS가 30이고 공개된 업계 평균이 40이라면 격차는 10점이다. 그러나 업계 조사가 시장의 잠재 고객을 포함하고 자사 조사는 상담을 마친 고객에게만 발송됐다면, 이 차이를 고객 경험의 열세로 해석할 수 없다. 질문이 같아도 조사 대상과 응답 시점이 다르기 때문이다.

공개 벤치마크는 조사 조건을 재현할 수 있을 때 비교선이 된다. 목표를 정할 때는 외부 점수와의 단순한 차이보다 동일한 방식으로 측정한 자사 추세, 표본오차, 유지·재구매·매출과의 관계를 함께 봐야 한다.

계산식보다 먼저 조사 대상을 맞춰야 한다

NPS는 추천 의향을 0점부터 10점까지 묻고, 9·10점 응답자의 비율에서 0~6점 응답자의 비율을 뺀다. 7·8점 응답자는 가감하지 않지만 전체 응답자 수에는 포함된다. 따라서 점수 범위는 -100에서 100이며, 결과는 비율이 아니라 점수로 읽는 것이 정확하다. 이 계산법과 구간은 Bain의 NPS 측정 안내에서 확인된다.

NPS는 전체 응답자 중 추천 고객 비율에서 비추천 고객 비율을 뺀 점수다.

같은 계산식을 썼다고 해서 같은 지표가 되지는 않는다. 구매 직후 응답한 고객, 일정 기간 서비스를 이용한 고객, 브랜드를 알지만 구매하지 않은 사람은 모집단이 서로 다르다. 자사 이메일에 자발적으로 답한 표본과 독립 패널에서 추출한 표본도 응답 성향이 같다고 가정하기 어렵다.

배송이나 상담 같은 특정 경험 직후의 거래형 NPS는 접점 개선에 적합하다. 관계형 NPS는 일정 기간 누적된 고객 관계를 살피는 데 쓰인다. 잠재 고객까지 같은 설문으로 조사하는 경쟁 벤치마크는 시장 안에서 브랜드의 상대적 위치를 파악하려는 지표다.

Bain은 고객별 후속 조치에 활용하는 ‘bottom-up’ 점수와 직접 경쟁 기업을 같은 방식으로 측정하는 상대적 ‘top-down’ 점수를 구분한다. 두 점수는 수집 방식과 분석 단위가 다르다고 The Numbers behind the Net Promoter System에서 설명한다. 거래 직후 고객조사와 시장 패널 평균을 나란히 놓으면 숫자는 비교할 수 있어 보여도 같은 질문에 답하지 않는다.

NPS와 성장의 관계는 조사 설계에 따라 달라진다

Bain은 직접 경쟁 기업 사이의 상대 NPS 차이가 이후 매출 성장률 변동의 10~70%를 설명한다고 제시한다. 또 시장의 NPS 선도 기업은 경쟁사보다 평균 두 배 넘게 빠르게 성장한다고 주장한다. 업종별 설명력의 범위가 매우 넓고 분석의 원자료와 모형이 공개되지 않았으므로, 이 수치를 개별 기업의 매출 전망식으로 사용할 수는 없다.

Bain이 제시한 상대 NPS의 이후 매출 성장률 변동 설명 범위%

하한

10%

상한

70%

Bain은 직접 경쟁 기업 사이의 상대 NPS 차이가 이후 매출 성장률 변동의 10~70%를 설명한다고 제시한다. 업종별 분석 결과의 하한과 상한이며 개별 기업의 예측 구간은 아니다.

이 결과는 NPS 체계를 개발하고 관련 서비스를 제공하는 Bain의 분석이다. 이해관계만으로 결과를 배척할 이유는 없지만, 경쟁사 선정과 통제 변수, 관측 기간을 재현할 수 없는 요약값에는 검증상의 한계가 있다.

2007년 Journal of Marketing 연구는 노르웨이 21개 기업의 1만5,500건이 넘는 인터뷰를 이용해 NPS와 매출 성장의 관계를 다시 분석했다. 연구진은 NPS가 고객만족도 등 다른 지표보다 성장 예측력이 뚜렷하게 우월하다는 주장을 재현하지 못했다. 다만 노르웨이 고객만족도 조사에서 사용한 추천 척도는 원래 NPS 질문과 완전히 같지 않았고, 업종별 기업 수가 적었다. 이 연구는 NPS와 성장의 관계가 없다고 확정한 것이 아니라 보편적 우월성이 입증되지 않았음을 보여준다.

2022년 Journal of the Academy of Marketing Science 연구는 미국 스포츠웨어 7개 브랜드를 5년, 19개 분기에 걸쳐 분석했다. 조사 대상은 전월에 스포츠웨어를 구매한 16~30세 소비자였으며, 3만8,644명이 7개 브랜드에 대해 19만3,220건의 평가를 남겼다. 연구에서는 NPS의 절대 수준보다 점수의 변화가 다음 분기 매출 성장과 연결됐다. 그 관계도 현재 자사 고객만 대상으로 한 충성도형 NPS가 아니라, 조사 대상자가 살 수 있는 모든 브랜드를 평가하게 한 브랜드 건강도형 NPS에서 유효했다.

거래형·관계형·경쟁 벤치마크 NPS는 조사 대상과 활용 목적이 다르다.

이 결과는 조사 대상과 분석 방식이 예측력을 좌우한다는 점을 보여준다. 동시에 미국 스포츠웨어와 짧은 재구매 주기라는 조건을 벗어나면 같은 시차와 효과가 유지된다고 장담할 수 없다. NPS가 성장에 앞서 움직일 수는 있지만, 점수만으로 성장의 원인이나 규모를 추정할 수도 없다. 가격, 유통망, 광고비와 신제품 출시가 NPS와 매출을 함께 움직일 가능성이 남아 있다.

한국 점수를 해외 기준표에 옮길 때 생기는 문제

추천 질문에는 제품 평가뿐 아니라 다른 사람에게 권했을 때의 결과를 감수할 것인지에 대한 판단도 들어간다. Asia Marketing Journal의 2016년 논문은 한국과 일본의 사례에서 제품에 긍정적인 사람도 지인 관계에 미칠 위험을 고려해 낮은 추천 점수를 줄 수 있다고 설명한다.

이 논문은 사례 연구와 심리적 해석을 중심으로 하므로 한국 소비자 전체의 응답 성향이나 국가별 점수 차이를 정량화한 대표 표본 연구로 보기는 어렵다. 다만 추천 질문이 만족도나 재구매 의향과 다른 문화적 맥락을 포함할 수 있다는 경고로는 유용하다. 해외 평균과 비교하려면 국가뿐 아니라 조사 언어, 질문 문구, 표본 구성과 응답 시점까지 확인해야 한다.

같은 점수도 표본 수에 따라 불확실성이 다르다

NPS 보고서에는 점수와 함께 응답자 수와 구간 추정치를 제시하는 편이 좋다. NPS는 추천 고객과 비추천 고객이라는 세 범주 가운데 두 비율의 차이다. 작은 표본에서는 구성비가 조금만 달라져도 점수가 크게 움직인다.

NPS 구간추정 연구는 여러 추정법을 시뮬레이션한 결과, 일반적인 Wald 구간은 특히 작은 표본에서 실제 포함률이 명목상 95%에 못 미칠 수 있다고 보고했다. 연구가 시험한 방법 가운데 조정 Wald의 한 변형과 반복형 score 방법이 전반적으로 더 안정적이었다. 어느 방법이 항상 우월한 것은 아니며 표본 크기와 실제 응답 분포에 따라 성능이 달라졌다.

계산의 크기를 보기 위해 추천 고객 40%, 비추천 고객 20%, 중립 고객 40%인 모집단을 가정해 보자. NPS는 20이다. 무작위·독립 응답을 가정한 단순 정규근사에서 표준오차는 100×√{[0.40+0.20−(0.40−0.20)²]/n}이다. 95% 구간의 반폭은 응답자 100명일 때 약 14.7점, 250명일 때 약 9.3점, 1,000명일 때 약 4.6점으로 계산된다.

이는 이해를 위한 근사치다. 비응답 편향, 고객별 반복 응답, 층화 추출과 가중치는 반영하지 않는다. 두 달 점수를 비교할 때는 각 월의 표본 구성과 추출 방식을 확인하고, 실제 자료에 맞는 구간 추정이나 부트스트랩을 적용해야 한다. 고객군의 비중이 달라졌다면 전체 점수보다 신규·기존 고객, 상품군과 접점별 결과를 먼저 살펴야 한다.

재현할 수 있는 목표를 정하는 방법

측정 규칙은 먼저 고정해야 한다. 관계형 조사에서는 고객 자격과 이용 기간, 조사 주기를 문서화한다. 거래형 조사는 어느 접점이 끝난 뒤 얼마 안에 요청할지를 정한다. 질문 문구, 척도의 방향, 중복 응답 처리와 제외 기준도 같은 기간에는 유지한다.

공개 벤치마크를 채택하려면 다음 조건을 확인할 필요가 있다.

자사 조사와 국가, 언어, 조사 시점이 비슷한가
현재 고객만 조사했는지, 비고객과 이탈 고객도 포함했는가
관계 전반을 물었는지, 특정 거래 직후 경험을 물었는가
표본 추출 방식, 응답자 수, 가중치와 구간 추정치가 공개됐는가
자사와 경쟁사에 같은 질문과 조사 채널을 적용했는가

재현 가능한 목표는 같은 조사 설계를 유지하고 결과를 실제 고객 행동과 연결해 만든다.

조건을 맞춘 외부 자료가 없다면 출처가 불완전한 ‘업계 평균 40’을 성과 목표로 삼기 어렵다. 대신 동일 설계의 분기 조사에서 기준선보다 의미 있게 개선하는 목표를 세울 수 있다. 만족 고객에게만 응답을 요청하거나 조사 시점을 바꿔 점수를 높이면 이전 기준선과의 비교 가능성이 사라진다.

최종 검증 대상은 사업 성과다. 고객 식별자를 적법하고 안전하게 연결할 수 있다면 추천·중립·비추천 집단의 3개월 또는 6개월 유지율, 재구매율, 객단가와 문의 재발률을 비교한다. 현재 NPS 또는 그 변화가 다음 기간의 성과를 예측하는지도 확인 대상이다. Bain도 추천 고객과 비추천 고객의 가치 차이는 사업과 시장에 따라 달라지므로 기업별로 분석할 것을 권한다.

NPS는 고객 경험의 방향을 압축해 공유하는 지표로 쓸 수 있다. 공개 업계 평균이 목표가 되려면 자사 조사와 같은 모집단과 절차를 사용했다는 근거가 필요하다. 그 조건을 확인할 수 없다면 내부 추세의 불확실성을 관리하고, NPS가 실제 고객 행동과 연결되는지를 자사 자료로 검증하는 편이 판단 근거가 분명하다.