IndexNow и WooCommerce: решение проблем с индексацией и варианты отладки

Диагностика проблем с индексацией товаров в WooCommerce через IndexNow

Проблемы с индексацией товаров WooCommerce часто проявляются в виде отсутствия новых или обновленных продуктов в поисковой выдаче, либо задержек в обновлении статуса товаров (например, при изменении наличия или цены). Для проверки состояния индексации:

• Убедитесь, что IndexNow ключ добавлен и активен на вашем сайте.
• Проверьте логи отправки URL в IndexNow (например, через плагин или кастомные логи).
• Используйте инструменты разработчика браузера, чтобы отследить успешность HTTP-запросов к API IndexNow.
• Проверьте, что URL товаров доступны и не блокируются robots.txt или мета-тегами.

Для диагностики рекомендуем добавить следующий код в functions.php или в плагин, чтобы логировать отправку URL:

add_action('save_post_product', function($post_id) {
    if (wp_is_post_revision($post_id)) {
        return;
    }
    $url = get_permalink($post_id);
    // Отправляем URL в IndexNow (пример функции отправки send_url_to_indexnow)
    $result = send_url_to_indexnow($url);
    error_log('IndexNow send result for ' . $url . ': ' . print_r($result, true));
});

function send_url_to_indexnow($url) {
    $key = 'ваш_ключ_indexnow';
    $endpoint = 'https://api.indexnow.org/indexnow?url=' . urlencode($url) . '&key=' . $key;
    $response = wp_remote_get($endpoint);
    if (is_wp_error($response)) {
        return $response->get_error_message();
    }
    return wp_remote_retrieve_body($response);
}

Пошаговое решение: как исправить проблемы с индексацией WooCommerce через IndexNow

1. Проверка и корректировка robots.txt и мета-тегов

Убедитесь, что в robots.txt не блокируются каталоги с товарами, обычно это /product/ или кастомные слаги. Пример корректного файла:

User-agent: *
Allow: /wp-content/uploads/
Allow: /product/
Disallow: /wp-admin/
Disallow: /checkout/
Disallow: /cart/
Disallow: /my-account/

Также проверьте, что на страницах товаров не стоит мета-тег noindex. Для этого можно использовать плагин SEO (например, Yoast или RankMath).

2. Автоматическая отправка URL при изменении товара

Добавьте автоматическую отправку URL в IndexNow при обновлении товара, чтобы изменения оперативно попадали в индекс поисковиков:

add_action('save_post_product', 'indexnow_send_product_url', 10, 1);
function indexnow_send_product_url($post_id) {
    if (wp_is_post_revision($post_id)) {
        return;
    }
    $url = get_permalink($post_id);
    indexnow_send_url($url);
}

function indexnow_send_url($url) {
    $key = 'ваш_ключ_indexnow';
    $endpoint = 'https://api.indexnow.org/indexnow';
    $body = json_encode(['host' => parse_url($url, PHP_URL_HOST), 'key' => $key, 'urlList' => [$url]]);

    $response = wp_remote_post($endpoint, [
        'headers' => ['Content-Type' => 'application/json'],
        'body' => $body,
        'timeout' => 10
    ]);

    if (is_wp_error($response)) {
        error_log('IndexNow error: ' . $response->get_error_message());
    } else {
        error_log('IndexNow response: ' . wp_remote_retrieve_body($response));
    }
}

3. Очистка кэша и обновление Sitemap

После обновления товаров и отправки URL в IndexNow рекомендуется:

• Очищать кэш (плагинов, CDN).
• Обновлять Sitemap, если он используется для IndexNow.

Пример вызова очистки кэша для плагина WP Super Cache:

if (function_exists('wp_cache_clear_cache')) {
    wp_cache_clear_cache();
}

Проверка результата после внедрения

Для проверки отправки URL и реакции поисковых систем:

• Проверяйте логи ошибок и ответов IndexNow (как в примерах выше).
• Используйте инструменты для вебмастеров Bing и Yandex, чтобы увидеть статус индексации.
• Отслеживайте появление обновленных товаров в поисковой выдаче.

Частые ошибки и как их исправить

• Ошибка 403 или отказ в доступе при отправке URL: Проверьте правильность ключа IndexNow и соответствие домена.
• Отправка URL не происходит при массовом обновлении товаров: Ограничьте частоту отправок, используйте очередь и пакетную обработку (см. следующий раздел).
• robots.txt блокирует страницы товаров: Проверьте и откорректируйте правила.
• Отправка URL не приводит к обновлению индекса: Проверьте, что URL действительно доступны и не имеют редиректов.

Практические советы по оптимизации отправки URL для больших WooCommerce магазинов

При большом количестве товаров массовая отправка URL может привести к превышению лимитов API и нагрузке на сервер.

Реализация очереди и пакетной обработки URL

Пример создания очереди с использованием транзиентов и Cron для пакетной отправки:

function indexnow_add_url_to_queue($url) {
    $queue = get_transient('indexnow_url_queue') ?: [];
    if (!in_array($url, $queue)) {
        $queue[] = $url;
        set_transient('indexnow_url_queue', $queue, HOUR_IN_SECONDS);
    }
}

add_action('save_post_product', function($post_id) {
    if (wp_is_post_revision($post_id)) return;
    $url = get_permalink($post_id);
    indexnow_add_url_to_queue($url);
});

add_action('indexnow_cron_send_urls', function() {
    $queue = get_transient('indexnow_url_queue') ?: [];
    if (empty($queue)) return;

    $batch = array_splice($queue, 0, 10); // Отправляем по 10 URL за раз
    $key = 'ваш_ключ_indexnow';
    $host = parse_url(home_url(), PHP_URL_HOST);
    $body = json_encode(['host' => $host, 'key' => $key, 'urlList' => $batch]);

    $response = wp_remote_post('https://api.indexnow.org/indexnow', [
        'headers' => ['Content-Type' => 'application/json'],
        'body' => $body,
        'timeout' => 10
    ]);

    if (!is_wp_error($response)) {
        // Успешно отправлено - обновляем очередь
        set_transient('indexnow_url_queue', $queue, HOUR_IN_SECONDS);
    } else {
        error_log('IndexNow batch error: ' . $response->get_error_message());
    }
});

if (!wp_next_scheduled('indexnow_cron_send_urls')) {
    wp_schedule_event(time(), 'hourly', 'indexnow_cron_send_urls');
}

Сравнение методов отправки URL в WooCommerce