Каждый селлер Wildberries регулярно сталкивается с соблазном быстро оценить эффективность нового главного фото или заголовка: поставить вчера вариант А, сегодня запустить вариант Б, а к вечеру сделать категоричный вывод по суточной конверсии в клик и заказ. Однако прикладной разбор аналитиков сервиса MarketGuru на основе реального финансового отчета WB продемонстрировал, почему прямолинейные однодневные тесты приводят к ошибочным решениям из-за алгоритмических колебаний скидки постоянного покупателя (СПП).
Анатомия суточного ценового разброса
В опубликованном кейсе базовая цена товара, установленная продавцом в личном кабинете, оставалась строго неизменной и составляла 847 рублей. Казалось бы, условия эксперимента зафиксированы. Однако для конечных покупателей стоимость этого артикула на витрине маркетплейса в течение одних и тех же суток непрерывно колебалась в диапазоне от 480 до 677 рублей.
Разница составила без малого 200 рублей, или почти 30% от медианного чека. Причина заключалась в динамическом пересчете персональной СПП, размер которой варьировался алгоритмами маркетплейса от 20% до 45%.
Когда покупатель видит товар за 480 рублей вместо 677 рублей, его готовность оформить заказ возрастает в разы независимо от ракурса фотографии, оттенка фона или формулировки инфографики. Если в этот момент селлер включил тестовую обложку, он ошибочно припишет взрывной рост конверсии дизайнерскому решению, хотя единственным драйвером продаж послужила временная субсидия площадки.
Множество скрытых переменных
СПП — не единственный скрытый фактор, искажающий результаты сплит-тестов. На дневную воронку продаж одновременно влияют:
- Позиция товара в выдаче и активность прямых соседей по поисковой строке: если конкурент рядом временно снизил цену или включил агрессивный автобиддинг, кликабельность вашей карточки неизбежно просядет.
- Смена паттернов аудитории по дням недели: вечерний пятничный трафик ведет себя принципиально иначе, чем дневной понедельничный.
- Внешние условия и геотаргетинг: погода в регионах отгрузки и перераспределение остатков по складам могут резко менять срок доставки для локального покупателя.
Чтобы наглядно увидеть масштабы внешнего шума, эксперты советуют провести А/А-тестирование: загрузить в сплит-тест два абсолютно идентичных изображения. На малых объемах трафика один и тот же креатив покажет статистическую разницу CTR в 2–3%, доказывая, что случайные факторы влияют на воронку сильнее графики.
Правила чистого сплит-тестирования
Алгоритмы расчета персональной СПП не раскрываются маркетплейсом публично, поэтому продавцу необходимо компенсировать ценовые флуктуации правильной методологией тестирования:
- Не оценивать тест по дням. Сравнивать понедельник со вторником некорректно. Оптимальный подход — ротация вариантов с коротким интервалом (например, почасовая смена главного фото в течение суток), что позволяет равномерно распределить дневные ценовые скачки между обоими креативами.
- Набирать статистическую выборку. Минимальный порог для подведения предварительных итогов составляет не менее 5 000–10 000 показов на каждый тестируемый вариант. До достижения этих цифр любые выводы о победе дизайна остаются случайным совпадением.
- Обязательная повторная валидация. Креатив, показавший лучший результат в первой итерации, необходимо протестировать повторно в аналогичный календарный период, чтобы убедиться, что победа не была следствием разовой скидочной акции маркетплейса.