Шаблон сплит-тестирования SEO

Планируйте и проводите SEO A/B-тесты заголовков, шаблонов и внутристраничных изменений, чтобы доказывать влияние на органику фактами, а не догадками.

Большинство SEO-изменений внедряют наугад, и никто не может сказать, помогли они, навредили или не дали ничего. Этот шаблон проведёт вас через тестирование групп страниц (бакетов), созданное именно для поиска: вы делите похожие страницы на тестовую и контрольную группы и сравниваете органические результаты. Используйте его, чтобы сформулировать чёткую гипотезу, учесть сезонность и обновления алгоритмов, измерять результаты в Search Console и раскатывать победителей или откатывать неудачи с задокументированной историей.

6 готовых вариантов

Выберите гипотезу и тип теста

Превратите расплывчатую идею («новые заголовки помогут») в единую опровержимую гипотезу, привязанную к одной метрике.

Начните с одной чёткой гипотезы

Сформулируйте её одним предложением, которое можно доказать или опровергнуть. Не тестируйте пять вещей сразу, иначе вы не поймёте, что дало результат.

Гипотеза: [Если мы изменим X на этой группе страниц, то органическая метрика Y улучшится, потому что Z.]

Распространённые типы SEO-тестов

Тег title и meta description — переписывание (лучше всего для показателя кликабельности)
Шаблон страницы — изменения (макет, внутренние ссылки, схема)
Внутристраничный контент — дополнения (вступления, FAQ, заголовки)
Индексация / технические правки (canonical, структурированные данные)

Выберите метрику, соответствующую изменению: заголовки влияют на кликабельность и клики; контент и ссылки влияют на показы и позицию.

Основная метрика: [Клики / CTR / Средняя позиция]
Защитная метрика (не должна падать): [напр. конверсии]

Выберите тест и контроль (тестирование групп/бакетов страниц)

Разделите похожие URL на тестовый и контрольный бакеты, поскольку пользователей поиска нельзя разделить по cookie.

Почему не обычный A/B-тест?

В SEO вы не можете показать Googlebot две версии одного URL, поэтому разделение по cookie на уровне пользователя не работает. Вместо этого вы тестируете на уровне группы страниц: меняете один бакет страниц, оставляете сопоставимый бакет без изменений и сравниваете органические результаты со временем.

Создайте два сопоставимых бакета

Выберите набор похожих страниц (тот же шаблон и интент, напр. страницы товаров или категорий).
Случайно распределите каждую страницу в тест или контроль, чтобы трафик, возраст и тема были сбалансированы.
Убедитесь, что оба бакета имеют достаточно страниц и кликов, чтобы дать сигнал, а не шум.

Тестируемый шаблон страницы: [Страницы категорий]
Страницы в тестовом бакете: [кол-во URL]
Страницы в контрольном бакете: [кол-во URL]

Пусть единственным различием между бакетами будет изменение, которое вы тестируете. Никогда не показывайте Googlebot контент, отличный от того, что видят пользователи.

Настройте отслеживание и график

Определите, как долго идёт тест и какие именно данные вы будете собирать, прежде чем что-либо менять.

Сначала зафиксируйте план измерения

Определите источник данных и график до запуска, чтобы потом не иметь возможности переставить ворота.

Источник данных: Search Console (клики, показы, CTR, средняя позиция), отфильтрованные по наборам тестовых и контрольных URL.
Период до теста: зафиксируйте чистый базовый уровень для обоих бакетов, идеально — полный бизнес-цикл.
Период теста: достаточно долгий, чтобы Google переобошёл, переранжировал и накопил клики, часто несколько недель.

Зафиксируйте базовый уровень

Окно базового уровня: [даты]
Базовые клики тестового бакета: [кол-во]
Базовые клики контрольного бакета: [кол-во]
Планируемая дата запуска: [дата]
Планируемая дата завершения: [дата]

Отметьте дату запуска, чтобы сопоставить данные «до» и «после» и точно определить момент, когда изменение вступило в силу после переобхода.

Проведите тест (избегайте искажающих факторов)

Сохраняйте чистоту эксперимента, чтобы внешний фактор не приняли за ваш результат.

Внедрите изменение только в тестовый бакет

Примените изменение ко всем страницам тестового бакета сразу и заморозьте контрольный бакет. Затем не трогайте оба.

Следите за искажающими факторами

Не вносите других изменений ни в один бакет в ходе теста (новые ссылки, редизайн, цены).
Отслеживайте обновления алгоритмов и основные обновления; отмечайте те, что приходятся на окно теста.
Следите за обходом и индексацией, чтобы изменение действительно было живым и увиденным Google.
Избегайте сезонных всплесков, бьющих только по одному бакету (напр. акция на тестовых страницах).

Изменение внедрено (обход подтверждён): [дата]
Зафиксированные внешние события: [обновления, новости, кампании]

Удержитесь от подглядывания и завершения теста раньше в удачный день. Остановка, как только результаты выглядят благоприятными, раздувает ложноположительные выводы. Дайте запланированному периоду завершиться, чтобы оба бакета испытали одинаковые внешние условия.

Проанализируйте результаты (значимость, сезонность)

Честно сравните тест и контроль и решите, реален ли прирост или это шум.

Сравнивайте бакеты, а не только «до» и «после»

Сырые цифры «до» и «после» вводят в заблуждение, потому что трафик меняется сезонно. Контрольный бакет вбирает эти общие колебания, поэтому сравнивайте относительное изменение в тестовом бакете с контрольным за те же даты.

Вычислите изменение каждого бакета от базового уровня к периоду теста.
Вычтите изменение контроля, чтобы выделить эффект вашей правки.
Проверьте, достаточно ли велик и стабилен разрыв, чтобы быть реальным сигналом, а не недельным шумом.

Проверки на здравый смысл

Сезонность: двигались ли оба бакета вместе, кроме вашего изменения?
Обновления алгоритмов: могло ли обновление объяснить колебание?
Размер выборки: достаточно ли страниц и кликов, чтобы доверять результату?

Изменение тестового бакета: [%]
Изменение контрольного бакета: [%]
Чистый эффект: [+/- %]
Вердикт: [Победа / Поражение / Без эффекта]

Раскатайте или откатите и задокументируйте

Действуйте по результату и зафиксируйте вывод, чтобы следующий тест начинался умнее.

Решите, затем действуйте

Чёткая победа: раскатайте изменение на контрольный бакет и другие сопоставимые страницы.
Чёткое поражение: откатите тестовый бакет к исходной версии.
Без эффекта: откатите или оставьте по другим причинам (UX, доступность), но не заявляйте о приросте SEO.

Документируйте каждый тест

Тест, который вы не можете найти снова, — это тест, который вы повторите. Записывайте его в общем месте, чтобы команда строила библиотеку доказательств.

Название теста: [заголовок]
Гипотеза: [формулировка]
Результат: [победа / поражение / без изменений]
Решение: [раскатать / откатить]
Чему мы научились: [вывод]
Идея следующего теста: [продолжение]

Относитесь к результатам как к доказательствам для этого сайта, а не универсальному закону. Перепроверяйте важные победы позже, ведь Google меняется, и то, что сработало однажды, может угаснуть.

Как использовать этот шаблон

Сформулируйте одну опровержимую гипотезу и выберите единственную основную метрику (клики, CTR или среднюю позицию) плюс защитную метрику, которая не должна падать.
Выберите набор похожих страниц на одном шаблоне, затем случайно разделите их на тестовый и сопоставимый контрольный бакет сопоставимого размера и трафика.
Убедитесь, что оба бакета имеют достаточно страниц и кликов, чтобы обнаружить реальный сигнал; малые бакеты дают шум, которому нельзя доверять.
Соберите чистый базовый уровень из Search Console для обоих бакетов за репрезентативное окно, прежде чем что-либо менять.
Примените изменение только к тестовому бакету, заморозьте контрольный бакет и подтвердите, что Google переобошёл тестовые страницы.
Удерживайте оба бакета неизменными весь запланированный период, отмечайте любые обновления алгоритмов или кампании и удержитесь от досрочной остановки.
Сравните изменение тестового бакета с изменением контрольного за те же даты, чтобы выделить истинный эффект и исключить сезонность.
Раскатывайте победы на сопоставимые страницы, откатывайте неудачи и документируйте гипотезу, результат, решение и вывод для следующего теста.

Советы

Тестируйте одну переменную за раз. Если вы измените заголовки и шаблоны вместе, результат ничего не скажет о том, что именно сработало.
Всегда сравнивайте с контрольным бакетом, а не с сырыми цифрами «до» и «после». Контроль вбирает сезонные колебания и обновления алгоритмов, которые иначе вас обманули бы.
Дайте Google время переобойти и переранжировать, прежде чем читать результаты, и подтвердите, что изменение действительно проиндексировано, а не просто опубликовано.
Никогда не маскируйте контент и не показывайте Googlebot контент, отличный от того, что видят реальные пользователи, ради теста. Оба бакета должны показывать идентичный контент ботам и посетителям.

Частые вопросы

Почему я не могу провести для SEO обычный A/B-тест, как для показателя конверсии?

Инструменты CRO разделяют живых посетителей по cookie и показывают каждому другую версию того же URL. С Google так нельзя, потому что URL должен отдавать одну версию краулеру, а показ боту чего-то отличного от пользователей — это маскировка. Вместо этого SEO-тесты работают на уровне группы страниц: вы делите похожие страницы на тестовый и контрольный бакеты и сравниваете их органические результаты со временем.

Сколько страниц нужно, чтобы провести надёжный SEO сплит-тест?

Фиксированного числа нет, но вам нужно достаточно страниц и достаточно кликов на бакет, чтобы результат был сигналом, а не шумом. Несколько низкотрафиковых страниц будут резко колебаться от недели к неделе и ничего вам не скажут. Тесты на больших наборах похожих страниц (представьте шаблоны категорий или товаров со стабильным органическим трафиком) дают более чистые показания, чем тесты на нескольких разовых страницах.

Сколько должен длиться SEO-тест?

Достаточно долго, чтобы Google переобошёл и переранжировал тестовые страницы и чтобы оба бакета накопили значимые клики, что часто означает несколько недель. Проведение теста, идеально, через полный бизнес-цикл помогает усреднить будние и выходные паттерны. Избегайте досрочного завершения теста только потому, что результаты выглядят хорошо в один день, ведь остановка на благоприятном всплеске раздувает ложноположительные выводы.

Как отделить моё изменение от сезонности или обновления алгоритма?

Именно для этого и нужен контрольный бакет. Сезонность и основные обновления обычно двигают похожие страницы вместе, поэтому если оба бакета растут и падают синхронно, это общие эффекты. Вас интересует то, насколько тестовый бакет изменился сверх контрольного за те же даты. Всегда отмечайте любые обновления алгоритмов во время окна, чтобы иметь возможность их исключить.

Что я измеряю и откуда берутся данные?

Google Search Console — основной источник: клики, показы, показатель кликабельности и средняя позиция, отфильтрованные по точным URL каждого бакета. Сопоставьте метрику с изменением. Тесты title и meta description в основном двигают кликабельность и клики, тогда как контент, внутренние ссылки и изменения шаблона больше проявляются в показах и средней позиции.

Что делать, когда тест побеждает, проигрывает или не даёт эффекта?

Раскатайте чёткую победу на контрольный бакет и другие сопоставимые страницы. Откатите чёткого неудачника к оригиналу. Если измеримого эффекта нет, откатите или оставьте изменение по другим причинам, таким как удобство, но не заявляйте о приросте SEO, который вы не можете доказать. В каждом случае документируйте гипотезу, результат, решение и вывод, чтобы команда строила библиотеку доказательств вместо повторения догадок.