• /
  • /

Как команды Ozon, Avito и Свои Плюсы автоматизировали типовые задачи

  • Тест ролика, баннера, названия, идеи продукта — такие задачи регулярно приходят в исследовательскую команду, и процесс, который каждый раз начинается с брифа, анкеты и согласований, занимает важный ресурс. Мы спросили у команд Ozon, Avito и Свои Плюсы, как они поставили типовые тесты на рельсы и чем занялись, когда освободилось время.

Что именно автоматизировали

Если коротко, то всё, что повторяется — у команд есть типовые задачи, и их они перестали решать с нуля.
  • ТВ-реклама, сценарии будущих роликов, баннеры, названия, логотипы, идеи — наш стандартный конвейер. Весь поток тестов креативов у нас стандартизирован и поставлен на рельсы. Эти процессы уже масштабированы на все страны СНГ, где присутствует Ozon.
    Анна Вострова, Ozon
  • У нас в Avito вектор направлен на то, чтобы автоматизировать всё по максимуму. Если говорить про исследования, это касается всех стандартных подходов, всего, что связано с рекламными кампаниями. Мы вкладываем в это минимум времени, это уже отработанные подходы.
    Анна Латышева, Avito

Что значит «поставить на рельсы»

На практике это значит, что у типовой задачи есть готовый шаблон: методология, анкета и метрики уже выбраны, а каждый новый тест отличается только материалами. 
На этом строятся готовые решения Fastuna — «коробочки» под типовые задачи: тест роликов, баннеров, промо-акций, лендингов, названий и пр. Внутри уже есть:
  • стандартизированный подход;
  • разработанная методология (монадические тесты, прямое сравнение, сложные методики: PSM, 5 Sec Test, Text Test и т. д.);
  • готовая анкета с фиксированными вопросами;
  • стандартные (базовые) метрики, которые помогают получать сравнимые результаты;
  • понятный онлайн-отчет и стандартные выгрузки;
  • сравнение с рыночными нормами.
Запуск состоит из четырех шагов: загрузить материалы → выбрать аудиторию → добавить свои вопросы → настроить выборку. Анкету уже разработали исследователи, поэтому на запуск обычно уходит около 5 минут.
  • У нас в Ozon много времени на сет-ап проекта нет, поэтому нет времени на длительные прелюдии и коммуникации с агентствами. Нам нужно «вчера», а не «давайте созвонимся и обсудим формулировку пятого вопроса.
    Анна Вострова, Ozon

Что дальше: три разные стратегии

Автоматизация помогла командам продвинуться на ступеньку выше — ресурс, который раньше уходил на тесты, теперь направлен на более интересные, глубокие и важные задачи. Ниже — коллеги делятся, чем им теперь удается заниматься. Интересно, что каждая команда пошла по своему пути. 
Ozon: углубиться
  • Освободившееся время мы пустили в дело: ушли в глубокую аналитику баз данных протестированных креативов, пишем лернинги и строим динамику. Всё это регулярно передаём команде маркетинговых коммуникаций, и она учитывает наши наблюдения при разработке новых креативов. Мы из отдела «проверить креатив» эволюционировали в отдел «как применить все эти знания в будущем».
    Анна Вострова, Ozon
Первое, что сделали в Ozon, — перестали отвечать только на вопрос «хорошо или плохо». Накопленные базы протестированных креативов превратились в источник знаний для команды. 
Такая аналитика обычно получается, когда результаты тестов сопоставимы между собой, и в Ozon это тоже ценят:
  • Нормы мы любим: используем от Fastuna для стандартных вопросов и копим свои для наших специфических. Свои нормы — это наша внутренняя библия, по которой мы понимаем, хорошо для Ozon или просто неплохо для рынка. А нормы Fastuna — отличный внешний ориентир.
    Анна Вострова, Ozon
Свои Плюсы: расшириться
  • Мы стали значительно больше тестировать рекламных материалов, потому что автоматизированные подходы укладываются в срочный цикл продакшена. В результате мы, во-первых, тестируем больше вариантов в рамках одной кампании и тоньше полируем каждый материал, а во-вторых, можем пропускать через себя больше тестов и давать бизнесу больше возможностей для data-driven решений.
    Екатерина Кирюшкина, Свои Плюсы
Для Яндекса главный эффект — скорость. Тесты стали укладываться в срочный цикл продакшена, поэтому изменился и сам подход к кампании.
Avito: освободить голову для сложного
  • BHT-трекинги, рекламные кампании — это всё понятно, мозг к этому подключать не нужно, всё настроено. Только проверить выводы и убедиться, что ничего не сбилось. А вот нетипичные запросы бизнеса — эдхоки, как посчитать тарифы, конджойнты, лестницы цен, тесты концепций, когда выходит новый продукт, — тут нужно наше включение. И за счёт того, что мы автоматизировали всё ручное, остаётся время на всё сложное.
    Анна Латышева, Avito
В Avito трекинги и рекламные кампании уже настроены и почти не требуют внимания, поэтому команда может заниматься тем, с чем бизнес приходит впервые: тарифами, ценами, новыми продуктами.

Когда задача нестандартная

Бывает, что в готовую анкету не помещается всё, что нужно. В Ozon в таких случаях сначала добавляют недостающее в дополнительные вопросы, а если нестандартных вопросов набирается много, переносят проект в DIY PRO — конструктор опросов для более сложных задач.
  • Анкеты для готовых решений Fastuna нас устраивают. Всё недостающее мы докидываем в 5 дополнительных вопросов, хотя, конечно, хотелось бы, чтобы их было 6 или 7, но мы понимаем, что это уже читерство. Если у нас много нестандартных вопросов, мы переносим проект в DIY PRO.
    Анна Вострова, Ozon

С чего начать

Когда типовые тесты перестают отнимать время, появляется выбор: копать вглубь, как Ozon, проверять больше идей, как Яндекс, или брать сложные задачи, как Avito. Начать можно с одного повторяющегося теста: загрузить материалы в готовое решение и посмотреть, сколько времени освободится.
Поделитесь своими задачами, мы подберем решение :)