Эксперименты

Видеоролик против традиционной статьи — кто кого?

14 января 2013 года мы отправили первый выпуск в новом формате: с видеороликом, одной статьей, ссылками на другие проекты и списком «Рекомендуем почитать». Как вы думаете, какой материал в итоге получил большую популярность, видеоролик или статья?

Со счетом 222:150 победила статья. Именно столько уникальных подписчиков кликнули по обеим ссылкам. В процентах эти ссылки набрали по 24% и 16% (от 100% всех кликов по письму). Click Rate выпуска составил 10,4% и 7% соответственно.

Как вы думаете, почему видеоролик проиграл?

[29.02.2012] Эксперимент со ссылкой «Читать далее…»

В январе 2012 года мы в очередной раз обновили свою контент-стратегию и вместе с ней — формат рассылки.

После двух месяцев регулярной рассылки мы захотели проверить, окажет ли какое-либо влияние на кликабельность рассылки  замены текстовых ссылок «Читать далее…» на графические.

Так как в Mailchimp нет возможности проводить сплит-тесты, связанные с самим содержанием рассылки, мы провели его в полуавтоматическом режиме. При помощи программы Hairball мы создали статический сегмент, включающий в себя 717 подписчиков (ровно 50%) и загрузили его в Mailchimp. Чтобы создать сегмент со вторыми 50% подписчиками, мы просто исключили из общей базы участников первого сегмента.

Ниже вы можете увидеть скриншоты двух вариантов рассылки:

 

Результаты эксперимента:

  • Первый вариант письма открыли 44,7% получателей, перешли по ссылкам 20%, CTR составил 44,7%.
  • Второй вариант открыли 47,6% получателей, кликнули по ссылкам 22,7%, CTR — 47,8%.
  • Так как в данном эксперименте для нас наиболее важен был CTR — мы сделали вывод, что второе письмо оказалось на 7% эффективнее. Несмотря на небольшой отрыв, мы приняли решение использовать графические кнопки во всех последующих рассылках.

P.S. После нескольких выпусков с графическими кнопками мы получили сразу от нескольких подписчиков сообщения о том, что из писем пропали ссылки «Читать далее..» и просьбой их вернуть. Очевидно, что среди наших подписчиков есть люди, просматривающие письма без изображений, и графические кнопки затрудняют им взаимодействие с рассылкой. Поэтому мы вернули текстовые ссылки.

[29.02.2012] Эксперимент «Название компании против имени директора»

Цель эксперимента: определить влияние поля «От кого» на показатель открытий писем.

Объектом наблюдения было выбрано письмо-приглашение на семинар Игоря Манна с заголовком «Что подарить Игорю Манну на День рождения?».

Воспользовавшись предлагаемыми Mailchimp возможностям по проведению A/B-тестирования мы быстро настроили эксперимент и стали наблюдать.

Спустя две недели мы сняли показатели. Вот они (кликните, чтобы увеличить):

Результаты в сухом остатке.

Показатель открытий (open rate):

  • Конгру — 45,5%
  • Денис Собе-Панек — 54,7%

Показатель кликов (click rate):

  • Конгру — 16,5%
  • Денис Собе-Панек — 22%

Отношение кликов к открытиям (CTR):

  • Конгру — 36,3%
  • Денис Собе-Панек — 40,2%

Вывод: письмо, отправленное от имени Дениса Собе-Панека, открыли на 20% больше и перешли по ссылке на 33% больше подписчиков. Более того, использование имени в поле «От кого» увеличило CTR письма на 10,7%.

Важно учесть: имя Дениса Собе-Панека не является известным именем в мире интернет-маркетинга, большинство наших  подписчиков могли быть знакомы с ним только по страничке «Пара слов о Конгру» на сайте и по подписям в части постов в блоге, незначительная часть — клиенты — по личному общению. Посему данный эксперимент с большой долей вероятности можно назвать «чистым».

 Scroll to top