IndexNow: ускорение индексации в Яндекс и Bing, ver. 1.0.0

«IndexNow» — модуль для автоматического уведомления Яндекса и Bing о новых, изменённых и удалённых страницах сайта через протокол IndexNow.

На сайте регулярно появляются новые товары и разделы, публикуются статьи, меняются цены, наличие и адреса страниц. Поисковые системы могут узнать об этих изменениях только через несколько недель. В результате новые страницы не сразу попадают в поиск, а информация о существующих страницах долго остаётся неактуальной.

Модуль отслеживает изменения в 1С-Битрикс и автоматически отправляет соответствующие URL через IndexNow. Это помогает ускорить обнаружение новых страниц и повторный обход изменённых, сокращая время до обновления информации в поиске.

Что даёт модуль:

• Ускорение обнаружения изменений: Яндекс и Bing оперативно получают уведомления о новых, изменённых и удалённых страницах, что ускоряет их обход и обновление поискового индекса.

• Автоматизация: не нужно вручную отправлять URL после публикации или изменения страниц, модуль отслеживает события и формирует уведомления самостоятельно.

• Гибкая настройка: выбирайте сайты, инфоблоки и события, при которых необходимо отправлять уведомления.

• Контроль отправок: история, ответы поисковых систем, статистика и диагностика помогают отслеживать результаты и находить ошибки.

Модуль отслеживает события 1С-Битрикс и отправляет уведомления IndexNow при изменении элементов и разделов инфоблоков.

Поддерживаются:

• создание и изменение товаров и разделов;

• изменение URL;

• активация и деактивация;

• удаление элементов и разделов;

• изменение цен товаров;

• изменение наличия товаров.

Например, при добавлении нового товара его URL автоматически попадает в очередь отправки. При последующих изменениях страницы модуль может отправить адрес повторно в соответствии с настройками.

Доступны два режима:

• Напрямую в поисковые системы — отдельная отправка уведомлений в Яндекс и Bing.

• Через общий сервис IndexNow — отправка через выбранный сервис протокола.

При прямой отправке результаты и повторные попытки учитываются отдельно для каждой поисковой системы. Если один сервис временно недоступен, это не препятствует обработке уведомлений для другого.

Выбирайте, какие сайты, инфоблоки и изменения необходимо отслеживать.

Можно отдельно включать и отключать отправку для элементов и разделов, а также выбирать события, при которых URL добавляются в очередь.

Например, настроить уведомления для каталога товаров и раздела статей, не затрагивая служебные инфоблоки.

Одной настройки достаточно для всех подходящих элементов и разделов — создавать правила для каждой страницы не требуется.

Изменение адреса раздела может затронуть вложенные разделы и товары.

Например: /catalog/phones/ → /catalog/smartphones/

Если URL вложенных страниц зависят от пути раздела, их адреса также изменятся.

Модуль отслеживает такие изменения и формирует задания для затронутых страниц. Поисковые системы получают уведомления об изменении структуры каталога, включая вложенные URL.

Модуль сохраняет URL в очереди и отправляет их пакетами — до 10 000 адресов за один запрос.

Это позволяет обрабатывать массовые изменения каталога без отдельного HTTP-запроса к поисковому сервису при каждом сохранении элемента.

Периодичность обработки очереди настраивается, в том числе отдельно для каждого сайта.

Модуль сохраняет историю отправок и позволяет проверить результат обработки каждого URL.

В административной панели доступны:

• URL и сайт;

• событие, вызвавшее отправку;

• дата и время;

• поисковый сервис;

• количество попыток;

• HTTP-код и результат ответа;

• ошибка или причина пропуска;

• время следующей попытки.

Например, можно проверить, отправлялся ли URL товара после изменения цены, когда произошла отправка и какой ответ вернула поисковая система.

Диагностика помогает проверить настройки IndexNow, состояние ключа и доступность необходимых ресурсов.

Данные об URL и историю отправок можно экспортировать в CSV для дальнейшего анализа.

Отправляйте отдельные страницы или списки адресов вручную, без изменения содержимого инфоблоков.

Это удобно после SEO-аудита, обновления статических страниц или других работ, при которых необходимо повторно уведомить поисковые системы.

Перед добавлением адресов в очередь выполняется проверка URL.

Модуль позволяет исключать ненужные URL из отправки и учитывать ограничения файла robots.txt.

Проверку robots.txt можно включать и отключать для каждого сайта.

При включённой проверке модуль учитывает правила доступа поисковых роботов. Если robots.txt временно недоступен, отправка откладывается до следующей проверки.

Модуль поддерживает несколько сайтов в одной установке 1С-Битрикс, включая сайты на разных доменах и в подкаталогах.

Можно использовать общие настройки или задать индивидуальные параметры для каждого сайта.