Эксперимент в соцсетях начинается с пяти записанных строк: гипотеза, одна переменная, линия успеха, правило выборки и решение. Без них вы просто публикуете две версии и выбираете ту, что понравилась вам. Ниже бриф, который можно скопировать, и способ понять, что вообще стоит тестировать.
TLDR: Сначала напишите пять строк. Меняйте по одной переменной за раз и берите то, что может сдвинуть результат сильнее обычного шума. Правило для «победы», «провала» и «неясного результата» определите до того, как посмотрите на цифры.
Бриф эксперимента на одну страницу
Скопируйте это в документ и заполните до того, как запланируете первый пост.
| Строка | Что записать | Пример |
|---|---|---|
| Гипотеза | Если изменить X, Y улучшится, потому что Z | Если начать с результата, сохранения вырастут, потому что люди сразу видят выгоду |
| Переменная | Одно отличие | Первая строка: результат вперёд против вопроса вперёд |
| Что не меняется | Всё остальное | Тот же формат, тема, время публикации, хештеги |
| Линия успеха | Число и запас | Медиана сохранений на пост выросла минимум на 20% |
| Правило выборки | Сколько постов, сколько времени | 10 постов на вариант за 5 недель |
| Решение | Что делаем в конце | Победа: берём в работу. Провал: отбрасываем. В пределах 10%: неясно, повторить ещё раз или остановиться |
Строку с решением команды пропускают чаще всего, а именно она потом гасит споры.
Тестируйте то, что может выиграть
Некоторые рычаги почти не двигают результат. По данным Mydrop, количество хештегов меняло медианную вовлечённость максимум на 5% в любую сторону, а день недели почти ни на что не влиял: каждый день укладывался в 2% от медианы. Тестировать такое значит потратить месяц и не узнать ничего.
Заметные различия нашлись в другом. Карусели шли примерно на 10% выше типичного поста аккаунта, ссылка в подписи стоила около 7%, а публикации с полуночи до 6 утра шли на 17% ниже. Формат, место ссылки и первая строка, вот лучшие кандидаты на тест. Полные таблицы в материале Бенчмарки соцсетей от Mydrop.
Учтите шум, прежде чем выбирать победителя
Отдельные посты различаются очень сильно. В тех же данных средняя половина постов в Instagram держалась между 1,1% и 6,7% вовлечённости. Один пост с 5% против поста с 3% ничего не доказывает.
Три способа укротить шум:
- Повторите тест минимум на 8–10 постах на вариант.
- Сравнивайте со своей медианой, а не с фиксированным числом.
- Чередуйте варианты по дням, чтобы новостное событие не ударило только по одной стороне.
Ведите журнал, чтобы тесты складывались в систему
Тест, который закончился сообщением в Slack, через месяц потеряется. Записывайте каждый бриф и результат в одну таблицу: гипотеза, даты, результат, решение. Через квартал у вас будет библиотека того, что работает для ваших аккаунтов. Если нужна версия для команды, смотрите переиспользуемую библиотеку экспериментов.
Запускайте расписание из одного календаря
Варианты сравниваются честно, только если выходят по контролируемому расписанию. В контент-календаре Mydrop можно помечать каждый пост его вариантом, ставить их в очередь через слот и смотреть результаты в аналитике по каждому посту. Массовое создание выручает, когда одну и ту же идею нужно развести по вариантам для нескольких аккаунтов.
Знайте, когда прекращать тестировать
Как только переменная дважды дала явного победителя, берите её в работу и переходите к следующему рычагу. Не перепроверяйте её каждый квартал. Если у вас сольный аккаунт и нужен список покороче, смотрите лучшие A/B-тесты для сольных менеджеров.
Три ошибки, которые ломают чистый тест
- Меняете две вещи сразу. Новый формат и новый стиль подписи в одном варианте, и вы гадаете, что именно сработало.
- Подглядываете раньше времени. Остановиться после трёх постов, потому что один вариант вырвался вперёд, значит принять шум за результат.
- Двигаете планку. Если линия успеха была 20%, а результат 12%, ответ «неясно», а не «сойдёт».
Напишите бриф первым, и споры в основном исчезнут.
Запустите первый тест на этой неделе
Выберите один рычаг из списка выше, заполните бриф и запланируйте первые четыре поста уже сегодня. Дату разбора поставьте в календарь прямо сейчас. А когда захотите видеть календарь, варианты и результаты в одном месте, начните бесплатно в Mydrop.
Отзыв в Google
Отзыв в Trustpilot
Product Hunt comment
