Идея «проверки боем» может быть привлекательна. Получаемые таким образом результаты просты для понимания. Сделали лендинг с описанием нового продукта, залили трафик, посчитали конверсии, приняли решение о запуске продукта. Добавили фичу, посмотрели на реальное использование, прослезились, выпилили фичу. Сделали АБ-тест двух версий продукта, посмотрели на метрики, выбрали лучший вариант. Во всех этих случаях решение принимается на основании метрик, непосредственно связанных с эффективностью бизнеса. Однако, у такого прямолинейного подхода есть минусы.

Для FMCG рынка этот пример выглядит достаточно убедительно: нужно переоснастить производство, развести товар в магазины. Но и для «цифровых» продуктов исследовательские методы часто оказываются предпочтительнее.

Продуктовые и рекламные метрики — это хорошо, но недостаточно. Метрики описывают фактический результат, но не весь и не всегда. Исследования дополняют, а иногда и полностью заменяют метрики. Следующая табличка коротко поясняет основные отличия между анализом метрик (включая АБ-тесты) и исследования.

Метрики и исследования вместе дают комплексное понимание бизнеса, как изнутри, так и глазами аудитории. Их совместное применение улучшает качество и своевременность принимаемых решений.