Сайтом с 40 000 URL-адресов и SEO-командой из двух человек невозможно управлять постранично. Вы работаете с шаблонами и правилами, которые контролируют тысячи страниц одновременно.

В этом руководстве вы узнаете, как расставлять приоритеты SEO-задач на крупном веб-сайте, безопасно вносить изменения и выявлять проблемы с производительностью в различных разделах вашего сайта.

Что такое SEO в больших масштабах

SEO в больших масштабах — это процесс управления видимостью веб-сайта в органическом поиске, когда у него слишком много страниц для индивидуальной оптимизации.

Большинство крупных сайтов относятся к одному из трех типов:

Электронная коммерция: такой ритейлер, как IKEA, может иметь тысячи страниц товаров, а также страницы категорий, которые помогают покупателям просматривать эти товары.
Услуги с несколькими филиалами: у такой компании, как Mr. Rooter Plumbing, есть страницы для разных локаций, причем отдельные локации также охватывают предлагаемые ими сантехнические услуги.
Программное обеспечение как услуга (SaaS): у такой софтверной компании, как Shopify, может быть документация, охватывающая множество функций, задач и вопросов по устранению неполадок.

Основы SEO по-прежнему актуальны. Поисковым системам необходимо находить ваши важные страницы, понимать их контент и определять, когда показывать их в результатах поиска. Но в больших масштабах задача состоит в том, чтобы применять эти фундаментальные принципы последовательно на тысячах страниц.

В этом руководстве я сосредоточусь на управлении SEO-проблемами и производительностью на крупном веб-сайте. Если вам нужна помощь в создании контента в больших масштабах, обратитесь к нашему руководству по SEO-контенту.

Как управлять SEO в больших масштабах

Управление SEO в больших масштабах сводится к пяти шагам: организуйте страницы по типу, расставьте приоритеты для наиболее важных типов, исправьте общие проблемы, безопасно внедрите изменения и отслеживайте производительность каждого типа.

Последние четыре шага повторяются. Крупные сайты постоянно добавляют, изменяют и удаляют страницы, поэтому то, что вы видите во время мониторинга, определяет ваши следующие приоритеты. Наши кейсы по корпоративному SEO показывают, как другие команды реализуют этот процесс.

Следуйте этим шагам, чтобы сделать работу по SEO управляемой для тысяч или даже миллионов страниц:

1. Организуйте SEO-работу по типам страниц

На крупном сайте шаблон является вашей единицей работы. Если 4000 страниц категорий используют один шаблон, изменение этого шаблона изменяет все 4000 страниц. Измените одну страницу — и вы изменили одну.

Тип страницы — это группа страниц, выполняющих одну и ту же функцию, например страницы товаров, страницы категорий, страницы локаций или справочные статьи. Страницы одного типа обычно используют общий шаблон или следуют одним и тем же правилам, поэтому группировка URL-адресов по типу страниц — это способ найти шаблоны, над которыми стоит работать.

Точные группы типов страниц будут различаться в зависимости от веб-сайта.

Карта сайта Home Depot показывает несколько типов страниц рядом друг с другом: категории товаров, такие как «Электрика» и «Батарейки», и страницы проектов, такие как «Идеи для ванной» и «Идеи для кухни».

У Mr. Rooter есть страницы локаций, страницы услуг и страницы, объединяющие локацию с конкретной услугой.

Справочный центр Shopify представляет собой единый тип страниц — справочные статьи, организованные по темам, таким как приложения, продукты, платежи и точка продаж.

Чтобы найти эти типы страниц на собственном сайте, начните с анализа организации ваших URL-адресов. Вы можете использовать инструмент Site Audit от Semrush, который может сканировать до 100 000 страниц за один аудит и до одного миллиона страниц в месяц на тарифном плане Business в SEO Toolkit.

Создайте проект Site Audit для вашего домена, настройте аудит, а затем нажмите «Start audit».

Перейдите в отчет «Crawled Pages» и нажмите «Site Structure». Здесь показаны просканированные URL-адреса, организованные по поддоменам и подпапкам, а также количество URL-адресов в каждом разделе.

Ищите папки, которые соответствуют вашим основным типам страниц. Например:

/products/ может содержать страницы товаров
/collections/ может содержать страницы категорий
/locations/ может содержать страницы локаций
/blog/ может содержать записи в блоге

Используйте эти разделы для создания основных групп типов страниц.

Если ваша структура URL не разделяет четко типы страниц, проверьте, как страницы классифицируются в вашей системе управления контентом (CMS). Ваша CMS уже может группировать страницы как продукты, категории, статьи, локации или другие типы страниц.

2. Расставьте приоритеты типов страниц по влиянию на бизнес

Оцените каждый тип страницы по тому, насколько прямо он влияет на доходы, лиды или другие ключевые результаты бизнеса.

То, что считается высоким влиянием, зависит от типа вашего бизнеса и способа получения дохода. Например:

Сайт электронной коммерции, такой как IKEA, может рассматривать страницы товаров как страницы с высоким влиянием, поскольку они могут напрямую приводить к покупкам, в то время как статьи с идеями и вдохновением могут иметь меньшее влияние, если они в основном поддерживают исследования.
Сайт услуг с несколькими филиалами, такой как Mr. Rooter, может рассматривать страницы услуг как страницы с высоким влиянием, поскольку они могут генерировать звонки или бронирования, в то время как сообщения в блоге могут иметь меньшее влияние, если они в основном отвечают на информационные вопросы.
Сайт SaaS, такой как Shopify, может рассматривать страницы функций как страницы с высоким влиянием, поскольку они могут влиять на регистрации или запросы на демо-версии, в то время как статьи справочного центра могут иметь меньшее влияние, если они в основном поддерживают существующих клиентов.

Как правило, типы страниц, которые находятся ближе к покупке, бронированию или квалифицированному лиду, часто заслуживают большего внимания, чем страницы, которые в основном поддерживают исследования или предоставляют информацию.

Таким образом, тип страницы, который получает 40 000 посещений, но генерирует мало конверсий, может заслуживать меньшего внимания, чем тот, который получает 3 000 посещений и стабильно приносит продажи или лиды.

Используйте аналитику, данные электронной коммерции, системы управления взаимоотношениями с клиентами (CRM) или другие бизнес-данные, чтобы узнать, какие типы страниц генерируют доходы, лиды, бронирования или другие ценные конверсии. Затем назначьте каждому типу страницы приоритет, например высокий, средний или низкий, основываясь на этом вкладе.

Если ваша настройка аналитики не позволяет разделять производительность по типам страниц, используйте Organic Rankings от Semrush в качестве запасного варианта. Введите полный URL подпапки для типа страницы (например, «example.com/products/"), чтобы увидеть предполагаемый органический трафик и количество ключевых слов в рейтинге. Повторите это для основных типов страниц, чтобы сравнить их показатели в органическом поиске.

После того как вы расставили приоритеты типов страниц по их влиянию на бизнес, используйте показатель исправляемости, чтобы решить, с какими из групп с высоким влиянием работать в первую очередь.

Тип страницы проще улучшить в больших масштабах, когда множество затронутых URL-адресов разделяют шаблон, правило или компонент, который можно исправить один раз.

С типом страницы сложнее работать, когда проблемы различаются от страницы к странице или их исправление потребует серьезного редизайна, миграции или большого объема ручной работы.

Вы можете использовать Site Audit от Semrush, чтобы проверить, затрагивает ли одна и та же проблема множество URL-адресов в типе страницы с высоким влиянием. Откройте отчет «Issues» и нажмите на проблему, чтобы увидеть все URL-адреса, на которые она влияет.

Затем используйте опцию «Advanced filters», чтобы ввести подпапку для одного из ваших типов страниц с высоким влиянием. Например, введите «/products/» для страниц товаров. Это позволяет увидеть, появляется ли одна и та же проблема на многих URL-адресах в этой группе, а не только на нескольких отдельных страницах.

В конце этого шага каждый тип страницы должен иметь приоритет от высокого к низкому, причем самое сильное сочетание влияния на бизнес и исправляемости должно находиться наверху.

3. Устраняйте повторяющиеся SEO-проблемы в больших масштабах

Устраняйте повторяющиеся SEO-проблемы в типах страниц с наивысшим приоритетом путем выявления и исправления общей причины.

Распространенные проблемы, с которыми можно бороться в группах страниц, включают:

Таксономия сайта и структура URL

Таксономия сайта — это то, как вы группируете страницы по категориям и подкатегориям, а структура URL — то, как эти страницы представлены в их веб-адресах.

Например, IKEA организует свои категории товаров в рамках четкой иерархии и использует последовательные шаблоны URL для различных типов страниц.

На крупном сайте решения о таксономии и URL могут затрагивать целые группы страниц. Плохо спланированная категория или шаблон URL могут привести к появлению дублирующихся страниц, лишних уровней в иерархии или нескольких URL, выполняющих по сути одну и ту же задачу.

Для каждого приоритетного типа страницы проверьте, как ее категории и подкатегории организованы в вашей навигации или CMS. Затем найдите повторяющиеся шаблоны URL в этом разделе. Проверьте сайт на наличие таких проблем, как:

Категории или подкатегории, которые существенно пересекаются
Страницы, сгруппированные не под той родительской категорией
Уровни категорий, которые не несут полезного разделения

Предположим, на сайте есть варианты «/category/subcategory/» и «/subcategory/», и оба URL представляют одну и ту же категорию. Вместо того чтобы поддерживать оба варианта, сайт может выбрать одну структуру, переместить под нее соответствующие элементы или страницы, обновить внутренние ссылки и настроить перенаправление с избыточного URL на тот, который остается.

В зависимости от конкретной обнаруженной проблемы вам может потребоваться:

Объединить пересекающиеся категории: оставьте одну категорию, если две категории выполняют по сути одну и ту же функцию
Переместить страницы в более подходящую категорию: поместите страницы в категорию, которая лучше всего соответствует их содержимому
Удалить ненужные уровни категорий: упростите те части иерархии, которые не добавляют полезного разделения
Использовать последовательные шаблоны URL: соблюдайте единую структуру URL для страниц одного типа

Если одна и та же проблема со структурой URL затрагивает множество страниц одного типа, измените шаблон URL в своей CMS, а не редактируйте каждый URL по отдельности. Настройте перенаправления по тому же правилу, чтобы затронутые URL стабильно указывали на новую структуру.

Сканирование и индексирование

Сканирование — это то, как поисковые системы обнаруживают и загружают ваши страницы, а индексирование — то, как подходящие страницы добавляются в индекс поисковой системы, чтобы они могли появляться в результатах поиска.

На крупном сайте вам необходимо управлять кралловским бюджетом (краулинговым бюджетом), чтобы поисковые системы тратили больше ресурсов на сканирование важных страниц. Тысячи ненужных фильтров, параметров или дублирующихся URL могут исчерпать кралловский бюджет и, в случае индексации, привести к раздуванию индекса.

Например, страница категории в интернет-магазине может позволять покупателям фильтровать товары по размеру, цвету, бренду, цене и доступности. Различные комбинации фильтров могут генерировать множество URL, даже если многие из этих страниц не должны появляться в результатах поиска.

Проверьте свои приоритетные типы страниц на наличие:

Ошибок доступа: ответов 4xx или 5xx, которые мешают краулерам добираться до важных страниц
Недоступных URL в карте сайта: страниц, указанных в вашей карте сайта, к которым краулеры не имеют доступа
Блокировок сканирования: важных URL, заблокированных правилами robots.txt
Блокировок индексации: важных страниц с директивой noindex, которая мешает им появляться в результатах поиска
Ненужных вариаций URL: фильтров или параметров, которые генерируют большое количество доступных для сканирования URL
Проблем с пагинацией: страниц пагинации без уникальных URL или доступных для сканирования ссылок на последующие страницы

Вы можете выявить эти проблемы в инструменте Site Audit от Semrush. На вкладке «Overview» прокрутите до раздела «Thematic Reports» и в пункте «Crawlability» нажмите «View details».

Проверьте отчет «HTTP Status Code» для страниц, возвращающих ошибки 4xx или 5xx. Затем проверьте «Sitemap vs. Crawled Pages», чтобы узнать, смог ли Site Audit получить доступ к URL, указанным в вашей карте сайта.

Затем перейдите на вкладку «Issues» и выполните поиск по слову «block», чтобы найти важные страницы, затронутые блокировками сканирования или индексации.

После этого перейдите на вкладку «Crawled Pages» и найдите шаблоны URL, созданные фильтрами или параметрами, например «?color=» в URL. Это поможет выявить большие группы URL, созданные с помощью одного и того же фильтра или параметра.

На более крупных или сложных сайтах инструмент Enterprise Site Intelligence от Semrush включает функцию Bot Analytics, которая использует данные логов сервера, чтобы показать, какие URL запрашивают боты поисковых систем и как часто. Это позволяет подтвердить, добираются ли боты до URL из ваших приоритетных типов страниц или циклически сканируют ненужные шаблоны URL.

В зависимости от обнаруженных проблем вам может потребоваться:

Обновить правила сканирования: удалить или изменить правило robots.txt, которое блокирует важные страницы
Исправить ошибки доступа: устранить ошибки страниц или сервера, которые мешают краулерам добираться до важных URL
Управлять URL фильтров: сделать полезные комбинации фильтров индексируемыми и предотвратить сканирование малоценных комбинаций
Исправить пагинацию: назначить страницам пагинации уникальные URL и связать их доступными для сканирования ссылками
Исправить правила noindex: удалить директивы noindex со страниц, которые должны отображаться в результатах поиска

Если одна и та же проблема сканирования затрагивает множество URL, исправьте правило, которое создает или раскрывает эти URL, вместо того чтобы обрабатывать их по одному. Например, измените разметку ссылок, которая генерирует доступные для сканирования URL фильтров, или обновите соответствующее правило robots.txt, когда хотите запретить краулерам доступ к определенному шаблону URL.

Дублирующийся и практически дублирующийся контент

Дублирующийся и практически дублирующийся контент возникает тогда, когда разные URL содержат одинаковый или очень похожий основной контент.

На крупных сайтах это обычно происходит потому, что сайт создает несколько URL на основе одного и того же исходного контента или шаблона страницы.

Распространенные причины включают:

Варианты товара: разные версии одного и того же товара имеют отдельные URL с во многом схожим контентом
Фильтры и параметры сортировки: различные комбинации URL отображают множество одинаковых товаров
Похожие категории: отдельные страницы категорий содержат практически одинаковые товары и тексты

Например, IKEA присваивает каждому варианту товара собственный URL. Это желтая версия:

Другой вариант того же товара доступен по другому URL:

Большая часть содержимого страницы совпадает на обоих URL, в то время как такие детали, как цвет, цена или материал, различаются. Должны ли эти URL вариантов оставаться индексируемыми, зависит от поискового спроса. Если пользователи ищут конкретный вариант, например «желтое кресло-ушастик», сохранение этой страницы индексируемой может иметь смысл. Если у варианта небольшой самостоятельный поисковый спрос, вы можете использовать канонический тег, чтобы указать предпочитаемый URL товара.

Когда несколько практически дублирующихся URL остаются индексируемыми, поисковым системам все равно приходится определять, какая версия является наиболее релевантной для запроса. Они могут показать URL, отличный от того, который вы ожидаете увидеть.

Дублирующиеся URL также могут расходовать ресурсы на сканирование и разделять сигналы ранжирования, когда ссылки ведут на разные версии вместо одного предпочитаемого URL.

Начните с поиска дубликатов и близких к ним дубликатов страниц среди приоритетных типов страниц, которые вы определили ранее.

В инструменте Site Audit от Semrush перейдите на вкладку «Issues» и выполните поиск по запросу «duplicate content», чтобы увидеть страницы с идентичным контентом как минимум на 85%.

Нажмите на проблему, чтобы просмотреть затронутые URL, а затем отфильтруйте список по нужному типу страниц, например по страницам товаров или категорий.

После того как вы выявите затронутые страницы, сгруппируйте их по шаблону, вызывающему дублирование (например, варианты товара, фильтры или похожие категории), и решите, как следует обрабатывать каждый шаблон.

В зависимости от конкретной обнаруженной проблемы вам может потребоваться:

Перенаправить или объединить ненужные дубликаты: сохраняйте одну версию, когда несколько страниц выполняют по сути одну и ту же функцию.
Добавить или исправить канонические теги: укажите поисковым системам, какой URL вы предпочитаете использовать в качестве основной версии, если необходимо сохранить доступность похожих страниц.
Разделить страницы, которые должны ранжироваться отдельно: обновите общий шаблон или поля CMS, чтобы страницы могли содержать уникальную информацию, такую как атрибуты товара, данные о категории или контент с привязкой к конкретному местоположению.

Если дубликаты URL создаются для целого типа страниц, исправьте общий источник, а не корректируйте страницы по одной. Например, обновите правило канонизации в соответствующем шаблоне или измените правило генерации URL, которое создает дублирующие версии.

Многоязычное SEO и hreflang

Атрибут hreflang помогает поисковым системам понять, для пользователей на каком языке или в каком регионе предназначена та или иная версия страницы.

Например, на сайте может быть одна версия страницы товара на французском языке для пользователей во Франции и другая на немецком для пользователей в Германии. Hreflang подсказывает поисковым системам, какая версия предназначена для каждой аудитории.

На крупных сайтах одна неверная настройка hreflang может затронуть множество локализованных страниц.

Проверьте типы страниц с высоким приоритетом на наличие следующих проблем:

Отсутствующие обратные ссылки: одна локализованная страница ссылается на другую, но вторая страница не ссылается на первую.
Неверные коды языка или региона: в hreflang используется код, который поисковые системы не распознают, например «en-UK» вместо действующего «en-GB».
Недействительные целевые URL: тег hreflang указывает на страницу, которая перенаправляет, возвращает ошибку или не может быть проиндексирована.

Вы можете найти эти проблемы в инструменте Site Audit от Semrush. На вкладке «Overview» прокрутите страницу до раздела «Thematic Reports» и в подразделе «International SEO» нажмите «View details».

Проверьте проблемы с hreflang, такие как неверные коды hreflang и другие ошибки внедрения. Нажмите «# issues», чтобы просмотреть затронутые страницы.

Затем откройте раздел «Hreflang conflicts within page source code», чтобы увидеть каждую затронутую страницу, ее значения hreflang и тип проблемы.

Выявив затронутые страницы, исправьте теги hreflang: добавьте недостающие обратные ссылки, исправьте неверные коды языка или региона и замените URL-адреса, которые перенаправляют или не могут быть проиндексированы. Если одна и та же ошибка появляется на множестве локализованных страниц, обновите общее правило, которое создает эти теги hreflang, а не редактируйте каждую страницу по отдельности.

Внутренняя перелинковка

Внутренние ссылки помогают пользователям и поисковым системам находить связанные страницы и перемещаться по сайту.

На крупных сайтах важные страницы могут становиться «сиротами», то есть на них не ведет ни одна внутренняя ссылка. Либо они могут находиться на расстоянии более трех кликов от главной страницы, что указывает на большую глубину сканирования.

Проблемы с внутренней перелинковкой можно найти в инструменте Site Audit от Semrush. На вкладке «Overview» прокрутите страницу до раздела «Thematic Reports» и в подразделе «Internal Linking» нажмите «View details».

Изучите график глубины сканирования, чтобы узнать, сколько страниц находятся на расстоянии нескольких кликов от главной. Затем проверьте ошибки, предупреждения и уведомления на наличие таких проблем, как страницы-сироты в файле sitemap, неработающие внутренние ссылки и страницы всего с одной внутренней ссылкой. Нажмите «# issues», чтобы просмотреть затронутые URL-адреса.

Для страниц-сирот, которые должны остаться на сайте, добавьте ссылки с релевантных страниц, до которых пользователи и поисковые системы уже могут добраться. Для глубоко спрятанных страниц создайте более короткие пути с категорийных, корневых или других заметных страниц.

Если затронуто множество страниц одного типа, обновите навигацию или раздел связанного контента для этого типа страниц, чтобы добавлять ссылки сразу для всей группы, а не для каждой страницы по отдельности.

Рендеринг JavaScript

Рендеринг JavaScript — это процесс выполнения кода JavaScript, благодаря которому на странице появляются итоговый контент и ссылки.

На крупном сайте проблема рендеринга в общем шаблоне может затронуть каждую использующую его страницу.

Например, если шаблон полагается на JavaScript для добавления внутренних ссылок, и эти ссылки рендерится некорректно, поисковым системам может быть сложно найти страницы, на которые они ведут. Google умеет обрабатывать JavaScript, но сгенерированный с помощью JavaScript контент и ссылки все равно должны отображаться в формате, к которому Google может получить доступ и который может просканировать.

С помощью инструмента Site Audit от Semrush вы можете проверить, изменяет ли JavaScript такие элементы, как контент, ссылки, канонические теги или метатеги robots. Когда рендеринг JavaScript включен, в отчете «JS Impact» показывается, что именно меняется до и после рендеринга JavaScript.

Если одна и та же проблема рендеринга наблюдается на множестве страниц, исправьте общий шаблон или код, который ее вызывает. Затем повторно запустите Site Audit, чтобы убедиться, что затронутый контент или ссылки теперь рендерятся корректно.

Структурированные данные

Структурированные данные — это стандартизированный код, который сообщает поисковым системам значение конкретной информации на странице, например цены, доступности или рейтинга товара.

Благодаря им подходящие страницы могут отображаться в виде расширенных результатов (rich results), в которых некоторые из этих деталей выводятся прямо в Google.

Ошибки в структурированных данных могут распространяться на тысячи страниц, если разметка генерируется из общего шаблона или источника данных.

Например, интернет-магазин может использовать свой шаблон товара для добавления структурированных данных Product на каждую страницу товара. Если шаблон подтягивает неверное поле цены или наличия, одна и та же ошибка может появиться на всех страницах этого типа.

Ищите повторяющиеся проблемы, такие как:

Отсутствующие свойства: одно и то же обязательное поле отсутствует на множестве страниц.
Недействительная разметка: одна и та же ошибка структурированных данных повторяется на страницах определенного типа.
Неверные значения: цены, статус наличия или другие значения не соответствуют информации, отображаемой на странице.

Проблемы со структурированными данными можно найти в инструменте Site Audit от Semrush. На вкладке «Overview» прокрутите страницу до раздела «Thematic Reports» и в подразделе «Markup» нажмите «View details».

Изучите раздел «Structured Data Items», чтобы узнать, какие типы разметки являются действительными, а какие нет. Откройте недействительный элемент, чтобы просмотреть затронутые страницы и поля, требующие внимания.

Ищите одинаковые ошибки на URL-адресах, относящихся к одному типу страниц. Например, если в сотнях URL-адресов вида «/product/» отсутствует одно и то же свойство, проблема, скорее всего, кроется в шаблоне товара или в данных, поступающих в это свойство.

Исправьте общий источник на основе полученных результатов.

Если свойство отсутствует, добавьте его в шаблон, который генерирует разметку.
Если значение неверно, исправьте поле в CMS или каталоге товаров, которое передает это значение, либо скорректируйте сопоставление этого поля со структурированными данными.

После этого повторно запустите Site Audit, чтобы убедиться, что ошибка устранена на всех затронутых страницах.

4. Безопасное внедрение изменений

Внедряйте масштабные SEO-изменения поэтапно, чтобы убедиться в их корректной работе перед применением на всем сайте.

Ошибка при масштабном изменении может привести к падению позиций и органического трафика на значительной части сайта. Кроме того, одновременное внесение нескольких крупных изменений может затруднить определение причины возникшей проблемы.

При внедрении изменений на множестве страниц соблюдайте следующие меры предосторожности:

Установите исходные показатели до внедрения: зафиксируйте объем органического трафика и количество проиндексированных страниц для каждого затронутого типа страниц, а также настройте кампанию в инструменте Position Tracking с тегами для ключевых слов, связанных с каждым типом страниц.
Подготовьте вариант отката: сохраните предыдущую версию шаблона, чтобы ее можно было быстро восстановить, если развертывание вызовет проблемы
Группируйте внедрение по шаблонам: если разработчику необходимо внести изменения, создайте один тикет для общего шаблона вместо перечисления каждого затронутого URL
Назначьте владельца для каждого шаблона: определите, кто подписывает изменения для каждого общего шаблона, и составьте короткий контрольный список проверок, которые вы выполняете перед каждым релизом
Протестируйте и просканируйте изменения на стейджинге: примените обновление к репрезентативному набору страниц в среде стейджинг, а затем просканируйте стейджинг-сайт с помощью Site Audit, чтобы проверить наличие технических проблем перед запуском
Масштабируйте развертывание батчами: как только тест пройдет контроль качества (QA), примените изменения к дополнительным группам страниц, а не обновляйте весь сайт сразу. Это облегчает локализацию проблемы, если она возникнет.

После каждого развертывания перезапускайте Site Audit, чтобы проверить, не привели ли изменения к новым техническим проблемам. Перейдите в отчет «Сравнение краулов» (Compare Crawls), чтобы сравнить последний краул с предыдущим и увидеть, какие проблемы являются новыми, а какие — устраненными.

Для крупных сайтов инструмент Semrush Enterprise Site Intelligence непрерывно отслеживает техническое состояние и сигнализирует о новых проблемах по мере их появления, поэтому вашей команде не придется постоянно перепроверять сайт вручную.

Миграции сайтов

Редизайн — это самое рискованное изменение, которое может предпринять крупный сайт. Позиции часто падают, и на их восстановление могут уйти месяцы, а когда все меняется одновременно, невозможно определить, какое именно изменение вызвало падение.

По возможности перестраивайте по одному разделу за раз. Мигрируйте один тип страниц или подпапку, проверьте их доступность для краулинга, индексацию, редиректы и органический трафик по сравнению с базовым уровнем и исправьте все проблемы, прежде чем двигаться дальше.

Независимо от того, переносите ли вы один раздел или весь сайт целиком, эти пункты обязательны к выполнению:

Сначала просканируйте старый сайт: сохраните каждый текущий URL и данные его краулинга, чтобы после запуска вы могли проверить новый сайт на их основе
Создайте полную карту редиректов: сопоставьте каждый изменяющийся URL с его новым местом назначения до того, как что-либо будет перенесено
Избегайте цепочки редиректов: направляйте старые URL сразу на их конечный пункт назначения

После запуска просканируйте новый сайт и сравните его со старым краулом, чтобы найти пропущенные страницы и неработающие редиректы. Наш контрольный список миграции сайта охватывает весь процесс.

5. Мониторинг эффективности по сегментам

Как только ваши изменения будут запущены, отслеживайте приоритетные типы страниц, над которыми вы работали, чтобы увидеть, где SEO-показатели улучшаются, а где ухудшаются.

Отслеживание этих типов страниц по отдельности помогает заметить изменения, которые могут скрываться за общесайтовыми средними показателями. Например, общий органический трафик может оставаться на прежнем уровне, даже если страницы товаров теряют трафик, поскольку рост трафика в блоге компенсирует это падение.

Для каждого приоритетного типа страниц отслеживайте метрики, которые отражают как эффективность поиска, так и влияние на бизнес:

Проиндексированные страницы: отслеживайте, сколько важных URL каждого типа страниц включено в индекс Google
Органический трафик: следите за тем, увеличиваются или уменьшаются визиты из поиска
Органические конверсии: отслеживайте доход, лиды, бронирования или другие ценные действия, генерируемые данным типом страниц

Вы также можете позже добавить теги к ключевым словам из отчета «Обзор позиций» (Rankings Overview).