Но мы попали в ту же ловушку, что и все остальные. Консультанты нас заворожили, цифры привели в восторг. И мы быстро стали слишком полагаться на них: всем нужны были данные, чтобы не принимать решения самостоятельно. Вместо того чтобы двигаться вперед с проектом, можно было услышать: "Ну, давайте просто протестируем его". Никто не хотел брать на себя ответственность за то, что он делает.
Таким образом, вы запускаете тест. А затем запустили его снова. В понедельник группа клиентов выбирала вариант X. В пятницу та же группа выбирала вариант Y. А мы в это время платили миллионы долларов консультантам, которые за полтора месяца набрасывали на все свой собственный взгляд.
Данные не были руководством к действию. В лучшем случае это был костыль. В худшем - цементные башмаки. Это был паралич анализа.
И это происходит не только с помощью старых панелей клиентов. Если бы на дворе был 2016 год, а не 1996-й, мы бы уже давно обратились к A/B-тестированию - вездесущему инструменту эпохи Интернета. A/B-тестирование означает проведение цифрового эксперимента, в ходе которого вы тестируете вариант A по сравнению с вариантом B на сайте . То есть одни видят синюю кнопку, другие - оранжевую, и вы видите, какая кнопка набирает большее количество кликов. Это невероятный инструмент - гораздо более быстрый, чем опросы клиентов, и гораздо более простой в интерпретации.
Но даже при A/B-тестировании мы, вероятно, получили бы те же самые неясные результаты, тот же самый убивающий продукт страх принять неправильное решение.
Несмотря на то, что многие компании сегодня неистово тестируют каждый элемент своего продукта и беспрекословно следуют за кликами, A/B и пользовательское тестирование - это не дизайн продукта. Это инструмент. Тест. В лучшем случае - диагноз. Он может сказать вам, что что-то не работает, но не скажет, как это исправить. Или он может показать вам вариант, который решает одну гиперлокальную проблему, но ломает что-то другое.
Поэтому необходимо разрабатывать варианты и тесты, чтобы действительно знать, что вы тестируете. Вы должны продумать, что такое A и B, а не позволить алгоритму произвольно назначить их или бездумно бросить в стену, чтобы посмотреть, что попадется. А это требует понимания и знания всего пути клиента. Вам нужна гипотеза, и эта гипотеза должна быть частью более широкого видения продукта. Так, можно провести A/B-тестирование того, где должна располагаться кнопка "Купить" на веб-странице, должна ли она быть синей или оранжевой, но не стоит тестировать, должен ли клиент покупать в Интернете.
Если вы тестируете ядро своего продукта, если базовая функциональность может меняться в зависимости от прихотей A/B-тестов, то ядра нет. Там, где должно быть ваше видение продукта, есть дыра, и вы просто вытряхиваете данные в пустоту.
В нашем случае, как и в случае с любым другим продуктом первого поколения, мы могли бы разгребать землю вечно. Так и не было получено достаточно данных для уверенного выбора.
Если продукт действительно новый, то его не с чем сравнивать, нечего оптимизировать, нечего тестировать.
Мы были правы, когда четко определили целевого клиента, поговорили с ним и выяснили, какие проблемы у него есть. Но затем мы должны были найти наилучший способ решения этих проблем. Мы были правы, когда спрашивали их мнение и получали отзывы о наших разработках. Но затем мы должны были использовать полученную информацию, чтобы двигаться вперед в том направлении, в котором мы верим.
В конце концов наша команда разобралась, что к чему: мы перестали выбрасывать деньги на консультантов, перестали крутиться по кругу, начали двигаться вперед, доверяя себе и мнению умных людей, которые нас окружают.
Мы принимали решения. Я принял решение. Это - за. Это - нет. Вот как это будет работать.
Не все члены команды согласились со мной. Такое иногда случается, когда один человек должен принять окончательное решение. В такие моменты вы как руководитель или лидер обязаны объяснить, что это не демократия, что решение принимается на основе мнения и вы не придете к правильному выбору путем консенсуса. Но это и не диктатура. Вы не можете отдавать приказы, не объясняясь.
Расскажите команде о ходе своих размышлений. Расскажите обо всех данных, которые вы изучили, обо всех полученных знаниях и о том, почему в итоге вы сделали именно такой выбор. Примите мнение людей. Слушайте, а не реагируйте. Возможно, среди членов команды окажется меньшинство тех, кто согласен с принятым решением; возможно, будет получена хорошая обратная связь, которая заставит вас изменить свой план. Если нет, произнесите речь: Я понимаю вашу позицию. Вот те пункты, которые имеют смысл для наших клиентов, а вот те, которые не имеют. Мы должны двигаться дальше, и в данном случае я должен следовать своей интуиции. Поехали.