Как работает дробное тестирование с разбивкой на первый-второй часть 4

Мы обнаружили, что иногда требуется компромисс. Он нужен, если у вас есть смешанные варианты, но тогда были бы неуместны комбинации, которые вы не хотели бы видеть. В этом случае используйте многомерный тест и отключите неуместные комбинации сразу после начала теста.

Другая ситуация, в которой сработает только многомерный тест — это когда технические причины делают тест с разбивкой нецелесообразным. Если ваши страницы создаются системой управления контентом или платформой электронной торговли (возможно, используя параметры в URL), очень сложно создать целые альтернативные страницы. В этом случае вы все еще можете использовать многомерный метод и даже воссоздать что-то вроде теста с разбивкой на первый-второй, отключив все ненужные вам комбинации.

Риск этого подхода — и с тестированием с разбивкой на первый-второй — в том, что вы можете оказаться без положительных результатов и без информации о том, как сработали индивидуальные изменения.

Здесь я сделал четыре изменения: два разных заголовка, демонстрирование или отсутствие заголовка «Просто самый низкий…», замена фотографии четырьмя блоками, показывающими ключевые преимущества, плюс некоторые изменения в CSS (включая размер шрифта в боковом меню). Возможно, что два или три из этих изменений принесли значительные улучшения, тогда как остальные были убыточными, но, так как я не проверил их на многомерном тесте, я не могу узнать это.

Решите, что вы будете использовать в качестве вашей цели. Выбор обычно стоит между следующей ступенью и итоговой целью. Например, тестируете ли вы эффективность страницы услуг, подсчитывая количество людей, которые посещают страницу контактов, или количество тех, кто действительно делает запрос на связь? Существуют аргументы в пользу обоих подходов.

В идеале вам всегда следовало бы тестировать цель, у которой есть реальная деловая ценность, такую как действительный запрос на связь или реальная продажа. Это наиболее значимый подход, потому что он рассматривает всю последовательность, опыт посетителя как гармонию. Нет смысла заставлять людей переходить на следующий шаг, если они не продолжают двигаться к итоговой цели.

С другой стороны, так как на каждой ступени последовательности есть «утечки», люди будут уходить с каждого шага последовательности, в результате чего будет достигнуто меньше целей. Чем меньше целей вы получите, тем дольше вы будете ждать полезных результатов. Чем большее время занимают тесты, тем дольше вы будете реагировать и оптимизировать страницу. В случае домашней страницы Fastlec мы использовали в качестве цели «просмотр любой страницы о свойствах продукта», что является не конверсией, но промежуточным шагом к конверсии. Результатом этого были очень высокие уровни переходов по ссылкам — больше 80%, — которые, в сочетании с большим трафиком, дали убедительный результат всего за 10 дней. Можно возразить, что, хотя мои варианты дали более низкий уровень переходов по ссылкам к страницам продуктов, они могли все равно дать больше реальных продаж. В этом примере имеет смысл измерять конверсии как продажи.

1. Чем выше ваш трафик, тем более оправданно использование более отдаленных целей. Если у вас низкий трафик, вы можете получить лучшие результаты, проводя короткие тесты, нежели ожидая, пока завершится продолжительный эксперимент.

2. Можете ли вы оценить вклад одной страницы в итоговые результаты конверсии? Во многих случаях можно рационально рассматривать как хороший результат то, что вы заставили больше людей сделать один шаг вперед.