Если у вас большой сайт, то посоветовали использовать алгоритм ускорения индексации IndexNow. Его поддерживает Яндекс, но перестал поддерживать Google.

На картинке детали, мы попробуем внедрить для проекта poisk.im и я поделись опытом... Визуально можно реализовать за пару дней - ничего сложного... В одном запросе на индексацию можно закидывать до 10к ссылок (другие лимиты не нашел).

p.s. Протокол еще поддерживает Bing ... но он в РФ мертвый :)

Русский ИТ бизнес