Как правильно пользоваться NPS для измерения лояльности аудитории

Как правильно пользоваться NPS для измерения лояльности аудитории

В настоящее время в Украине, как и во многих других странах Восточной Европы и СНГ обрела популярность метрика Net Promoter Score (NPS). Придуманная не так давно, в 2003 году, американским маркетологом Райнхельдом методика была призвана помочь корректно измерять лояльность потребителя компании. Привлекательность метрики во многом обусловлена ее простотой, что сделало ее особенно интересной менеджерам среднего и высшего звена крупных системных компаний. Потребителю в ходе опроса предлагается дать ответ всего на один вопрос – готов ли он порекомендовать привычного ему поставщика, продукт или услугу коллегам и друзьям. При этом оценка дается в 11-балльной шкале (от 0 до 10). Иногда исследование дополняют вопросами, которые уточняют у потребителей причины выставления той или иной оценки. Далее рассчитывается доля групп так называемых «Критиков» (детракторов), «Нейтралов» и «Рекомендателей». После этого из доли «Рекомендателей» вычитается доля «Критиков». Полученное затем число делится на размер выборки, что и выдает индекс NPS (см. картинку).

 

 

 

 

 

 

 

 

 

NPS и норма его трактовки

Считается, что индекс NPS может иметь как положительное (+), так и отрицательное (-) значение. Положительный индекс (когда доля «промоутеров» превышает долю «критиков») означает, что у компании есть потенциал увеличения клиентской базы компании. Это происходит сугубо за счет лояльности к ней. Клиенты в таком случае приводят клиентов. Нулевой или отрицательный индекс говорит об отсутствии такого потенциала. Принято даже думать, что при больших отрицательных значениях существует риск оттока клиентов, т.к. детракторы помимо всего прочего склонны делать «анти-рекомендации». Обычно исходят из того, что компании, имеющие очень высокий положительный индекс (условно +50 и выше), в принципе не нуждаются в рекламе. Их клиентская база увеличивается сама собой. Примером служат ведущие компании из «силиконовой долины» (США).

Индекс NPS сам по себе полезен уже тем, что служит простой и доступной метрикой в качестве KPI в том случае, если компания ставит цель отслеживать свои показатели в динамике, а значит проводить повторные исследования. В практике применения NPS считается, что он адекватен изменениям в восприятии потребителей при измерении с частотой от одного раза в квартал до одного раза в год. Другое дело, что у представителей многих компаний отпадает охота изучать дальнейшие изменения, получив на старте впечатляющие 60-65%.

Проблемная ситуация

Проводя маркетинговые исследования на заказ с использованием метрики NPS, мы столкнулись с тем, что лишь немногая часть заказчиков умеет грамотно им пользоваться. Если копнуть глубже, этот простой метод измерения лояльности имеет ряд «подводных камней». Не учесть их вовремя означает ввести себя в заблуждение с перспективой утраты связи с реальной рыночной ситуацией. Ниже приводим ряд важных выводов, к которым нас подвигли два недавних кейса UkrSocStandart – исследования, сопровождавшиеся применением индекса NPS. И для начала сами эти кейсы.

Случай 1

Сеть магазинов одного бренда женской одежды на основании серии из 50 глубинных интервью решила изучить уровень лояльности аудитории по методике NPS. Одновременно предполагалось исследовать и уровень их удовлетворенности по более привычной в маркетинге методике CSI (Sustomer Satisfaction Index) – благо формат сбора данных допускал одновременное применения ряда методик. Сразу оговоримся, что хотя опрос был телефонный, участники (преимущественно женщины 25-45 лет) стимулировались к участию при помощи подарка. Это позволило снизить неучастие в опросах нелояльных или менее лояльных потребителей – эффект, который часто не учитывается маркетологами отечественных компаний.

При этом Net Promoter Score клиента зафиксировал показатель в 64%. В то же время более объемная и кропотливая в сборе и обработке данных методика CSI обнаружила неудовлетворенность клиентов по части качества продуктов (качества ткани и пошива) – ключевого критерия, который по важности они поставили на первое место.

Случай 2

Один из крупнейших аэропортов Украины поставил цель измерить уровень удовлетворенности пассажиров его основными и дополнительными сервисами. Для этого на территории аэропорта нами при посадке на рейс или по прибытии с рейса были опрошены 406 пассажиров. В процессе опроса также были заданы вопросы NPS. Индекс Net Promoter Score зафиксировал показатель в 65,3%. При этом расшифровка и кодировка ответов на вопрос-обоснование показали: 1) большинство оценок положительные; 2) в том случае, когда респондент обосновывал негативную оценку, это в основном не касалось качества работы самого аэропорт. В основном критика касалась малого числа рейсов и размеров аэровокзала (аэропорт небольшой).

Вопросы:

  1. Как объяснить тот факт, что при достаточно высоком NPS у сети магазинов, показатель удовлетворенности клиентов оказался небеспроблемным?
  2. Достаточно ли выборки в 50 человек, чтоб быть уверенным в том, что полученный индекс NPS получился столь же надежным, как и в случае с выборкой в 400 человек?
  3. Насколько корректно сравнивать между собой NPS для компаний из различных отраслей (например, для сети магазинов женской одежды и для аэропорта), учитывая, что они выглядят примерно одинаково?
  4. Насколько корректно сравнивать между собой NPS компаний одной отрасли, действующих в различных странах, а не в одной стране?
  5. Насколько значим эффект места опроса при определении NPS? Можно ли допускать, что пассажиры аэропорта склонны будут выше оценивать свою готовность его рекомендовать друзьям, если их опрашивать на территории объекта исследования, а не за его пределами?

Выводы и рекомендации:

  1. Работая с NPS важно помнить, что эта метрика оперирует лояльностью клиентов компанией через готовность ее рекомендовать, но ни в коем случае не их удовлетворенностью ее продуктами. Очень часто неудовлетворенные качеством продуктов или услуг компании потребители готовы ее рекомендовать. Равно как и наоборот — распространен случай, когда удовлетворенные потребители ставят низкую оценку в своей готовности давать рекомендации. Поэтому если метод сбора данных допускает включение в одну анкету вопросов из сразу нескольких методик изучения реакций потребителей, нужно незамедлительно этим пользоваться. Комбинация метрик NPS и CSI в деле диагностики потребительских настроений хорошо себя зарекомендовала. Если обе метрики показывают одинаково позитивный результат – хороший повод спать спокойно. Если же один из критериев (как в нашем случае CSI) показывает наличие проблем – это веская причина к тому, чтобы трезво оценивать высокий NPS своего бизнеса или его продуктов. И, прежде всего, запросить у маркетингового агенства-подрядчика данные о погрешности NPS. Потому что,
  2. …выборка в 50 респондентов не столь репрезентативна, как выборка в 400 респондентов. В первом случае имеет место существенно большая погрешность. Так, измерив сначала дисперсию, мы установили, что NPS магазина женской одежды имеет погрешность на уровне 8,4%. Тогда как погрешность индекса аэропорта всего 2,74%. Это значит, что в ситуации проведения аналогичного исследования для сети магазинов женской одежды результат может попасть в объемный диапазон 55,6% – 72,4%. И с большой вероятностью показатель NPS при этом может оказаться ниже зафиксированного. Поэтому компании-Заказчику важно определиться на старте, на чем нужно поставить акцент – на глубине статистической информации или на ее репрезентативности.
  3. Несмотря на случайное сходство NPS сети магазинов женской одежды и аэропорта, сравнивать их некорректно. На различных рынках нормы NPS (средние значения индекса) различаются. Порой очень существенно – на десятки баллов. Гораздо информативнее — сравнение индекса компании со среднерыночным показателем и с NPS отдельно взятых компаний-конкурентов. Если компания, например, отстает от среднерыночного значения или от цифр конкурентов, ее цель на ближайшее время предельно проста – достигнуть контрольного показателя в ближайшие год или два. Точно так же проста цель компании, узнавшей о своем лидерском NPS – удерживать контрольный показатель или наращивать отрыв. Конечно, нелегко добыть в открытом доступе показатели конкурентов. Однако в этом деле также может помочь хорошее маркетинговое агентство, которое располагает своей базой статистической информации. А в случае отсутствия оной – помочь в кратчайшие сроки ее собрать. Важно иметь ввиду, что если цель определения NPS компании еще только предстоит, а метод сбора данных не ограничивает опросник в числе вопросов, возможность определить NPS основных игроков (конкурентов) на рынке можно предусмотреть заранее. Для этого необходимо максимально ответственно подойти к формированию выборки – она должна быть репрезентативной для всего рынка, на котором действует компания. Это значит, что если метод сбора данных — опрос в месте продаж или оказания услуги, дело не должно ограничиваться площадками заказчика.
  4. Наши наблюдения показывают: ошибочно сравнивать свой NPS не только с представителями разных отраслей, но и с представителями рынка, действующими в других странах. Мы сопоставили NPS для отечественного аэропорта c показателями этой метрики для аэропортов США и Британии. И увидели, что в 2008 году Phoenix Marketing Airport Network Promoter Scorecard одним из лучших аэропортов в США признала Тампу с NPS 19,7%, что значительно превысило средний по стране… -20,3%. В Британии рейтинг NPS, заказанный одним из игроков рынка, возглавил аэропорт с показателем в 58% (см. картинку ниже). Сомнительно, чтоб полученное подлежало сравнению с NPS в 65%, зафиксированным по отечественному аэропорту. Это наталкивает на мысль о том, что индекс NPS для различных национальных рынков может сильно различаться. Наши сограждане, которые в среднем гораздо реже граждан США совершают авиаперелеты, склонны несколько выше оценивать показатели аэропортов Украины. Многим попросту еще не с чем сравнить. Другие же таким образом из чувства патриотизма поощряют отечественного поставщика, который наконец стал приближаться с международным стандартам. Однако логичнее всего выглядит гипотеза о том, что отечественному аэропорту гораздо легче получить более высокий NPS по причине заниженных ожиданий. Концепция национальных различий при определении среднерыночного NPS имеет право на жизнь и должна служить объектом более пристального внимания в среде маркетологов. 
  5. Будучи опрошенными в аэропорту, а не дома по телефону, некоторые пассажиры действительно будут склонны несколько выше оценивать свою готовность рекомендовать аэропорт друзьям или коллегам. Однако сомнительно, чтобы эффект места опроса был способен оказать воздействие на уровне, существенно превышающем статистическую погрешность. Обтекаемость формулировки основного вопроса NPS метрики не единожды подтверждала свою состоятельность.

Самое главное, что не должны забывать представители отечественных компаний, это то, что повышение индекса NPS не должно служить самоцелью. Эта метрика была и должна признаваться надежным инструментом измерения эффективности маркетинга компании. Не больше и не меньше. Во всяком случае до тех пор, пока мнение знакомых и друзей как источник информированности и как фактор потребительской активности продолжает в сознании потребителей иметь ключевое значение.


Денис Под'ячев

маркетолог, социолог, политолог

Добавить комментарий

Ваш e-mail не будет опубликован. Обязательные поля помечены *