A/B-тестирование

A/Б-тестирование — метод исследования юзабилити сайта, при котором пользователям сайта показываются несколько страниц с расположением элементов. Это необходимо для того, чтобы можно было определить, какой вариант предложенной страницы лучше конвертирует трафик, переводя посетителя в заказчика.
В методе A/Б-тестирование используется 2 варианта, соответственно отсюда его название. Более сложный из них - Multivariate (MVT) testing, при котором ведется работа с несколькими вариантами.
При проведении экспериментов по A/Б-тестированию необходимо иметь довольно значительное количество посетителей (не менее 1000 человек), способных правильно и адекватно оценивать разницу предложенных им вариантов, дабы погрешность стремилась к минимальному значению.

Для проведения тестирования нужно решить следующие задачи:

• техническую – по какому принципу следует сохранять варианты страниц, просматриваемые пользователями (IP-адресу, cookies, сессия);
• метод деления трафика.

Принципы A/Б-тестирования

• Варианты отличаются только одним изменением;
• Трафик между 2-мя вариантами распределяется случайно;
• Накопление достоверных статистических данных;
• Тестирование должно быть на новых посетителях;
• Результаты одновременно проверяются в обеих группах;
• Нужно верить результатам тестирования, а не собственным ощущениям.

Проблемы A/Б-тестирования

• неверные выводы; каждый вывод должен основываться на полученных цифрах;
• неправильно проведенный эксперимент; грубая и часто встречаемая ошибка – оценка страниц с несколькими различиями. Поэтому, каждый тест проводится последовательно, шаг за шагом.

A/Б-тестом невозможно измерить доверие к сайту со стороны пользователей, а также любой абстрактный показатель. Кроме этого нельзя делать выводы о поведении пользователей сайта. Настоящий текст затрагивает только расположение конкретных элементов. Изменения после A/B-тестирования могут изменить плохие позиции вашего сайта в положительную сторону.