Ухудшающие a/b тесты - 31

Ухудшающие a/b тесты

Улучшения, улучшения и улучшения — о чем еще думать команде разработки, менеджерам продукта и маркетологам?

Ухудшающие a/b тесты — как вам такое? Тему отлично раскрыл Олег Якубенков в своем блоге https://gopractice.ru/ab-test/

В двух словах о том, что в статье, а после наши мысли на этот счет

— Делать улучшения долго и дорого, а результат неоднозначный и гипотетический

— Чаще всего мы работаем именно над количественными метриками, а это значит мы работаем с показателями: скорость загрузки, размер комиссии, цены, время ответа и так далее. А это значит, что можно как увеличивать цифру, так и уменьшать ее — работа возможна в обоих направлениях.

— Думаете, что улучшение какой-то метрики может улучшить ваш продукт или бизнес-показатели? Попробуйте это наоборот ухудшить на ограниченной выборке пользователей и сделайте выводы

— Многие из нас неосознанно применяют ухудшающие тесты, сами того не подозревая и выводы из этих тестов часто очень полезны

А теперь наши мысли и немного готовых шаблонов для ухудшающего тестирования

Во-первых, методика нам очень нравится! Смелость, нетипичность, а возможно и радикальность — все это очень круто!

Что было в нашем опыте:
— увеличение комиссии для определенного среза посетителей сайта: рискнули лояльностью и возвращаемостью, но выяснили зависимость комиссии и оттока пользователей

— радикальное уменьшение количества экранов лендинга: появилось знание о взаимосвязи количества контента и конверсии, а соответственно и оправданных трудозатратах на разработку и масштабирование лендингов

— сокращение количества постов в соц. сетях и взаимосвязь этого с переходами на сайт

В своей статье автор приводит примеры на основе развития продуктов, но а мы придумали несколько идей для маркетинга и бизнеса в целом:

— убрать все дополнительные расширения в контекстной рекламе: уточнения, быстрые ссылки, визитку, отображаемую ссылку — изменится ли CTR, увеличится ли цена клика?

— убрать адаптивность сайта, поставив другое значение отображаемой области экрана viewport. Возможно ваша адаптивная версия хуже, чем полная версия и юзерам удобнее находить информацию на отсутствующей адаптивности?

— увеличить цену для группы товаров (на самом деле, наверное, это один из самых очевидных и общепринятых ухудшающих тестов)

— убрать какой-то дорогостоящий сервис или доп. услугу, которая казалось бы прям стандарт в отрасли

— перестать делать доставку дальше определенного радиуса.
Пишу статью и сразу в голове “Додо пицца”. Могу только предположить, что они именно поэтому и не доставляют в определенном радиусе, куда доставляют все остальные. Гипотеза: пицца горячая и свежая, а также доставка до 60 минут — высокий NPS и возвращаемость клиента — больший LTV и ARPU — победа над конкурентами в долгую

Понравилась статья? Подписывайтесь на наш Telegram канал

Другие записи
блога
Stories мне запили!
Интеграция новых форматов взаимодействия в мобильные приложения. Рассматриваем Stories в Тинькофф банке, а также пытаемся понять секрет успеха
Подробнее
Настройка целей Яндекс Метрики на WordPress
Мы привыкли делиться нашими наработками, поэтому представляем вам актуальный способ установки целей Яндекс Метрики в WordPress через небольшой скрипт
Подробнее
Stories мне запили!
Интеграция новых форматов взаимодействия в мобильные приложения. Рассматриваем Stories в Тинькофф банке, а также пытаемся понять секрет успеха
Подробнее
Настройка целей Яндекс Метрики на WordPress
Мы привыкли делиться нашими наработками, поэтому представляем вам актуальный способ установки целей Яндекс Метрики в WordPress через небольшой скрипт
Подробнее
г.Омск,
Гагарина 14, 703 офис
mail@weare31.com
С уважением к В.В. Кандинскому
Контакты
+7(950)95-33-111
mail@weare31.com
Гагарина 14, 703 офис
С уважением к В.В. Кандинскому