В классическом A/B тесте, мы, первым делом, определяем, что будем тестировать и какова наша задача. Далее мы создаем одну или несколько вариаций исходного веб-элемента (еще его называют контрольной группой или точкой отсчета) . Далее, мы делим трафик пополам (в случайном порядке: то есть распределяем пользователей согласно некой вероятности) , и, наконец, собираем данные (метрики) о том, как работает каждая версия страницы. Спустя какое-то время, мы анализируем данные и оставляем ту версию, которая отработала лучше, а менее удачную — выключаем.
Классная статья. Я тут недавно готовила чек-лист для проведения корректного А/Б тестирования https://shivasstories.ru/internet-marketing/tpost/bnbjmhh4p1-chek-list-dlya-provedeniya-korrektnogo-a