Сотрудник Google Джон Мюллер объяснил в Twitter, что при нормальной работе сайта проблем с индексацией быть не должно.
Если владельцу сайта приходится постоянно обращаться к инструменту для отправки запросов на сканирование, то это может указывать на возможные недочеты в работе ресурса. Вместо с того, чтобы регулярно использовать этот инструмент, лучше попробовать разобраться и решить те вопросы, которые приводят к проблемам с индексацией.
В целом же для естественного роста сайта Мюллер рекомендует не вмешиваться в его сканирование и индексацию, а оставить это на откуп поисковых систем. Конечно, при условии, что у сайта нет проблем, которые могут влиять на эти процессы.
For normal sites & natural growth, I'd just let the site get crawled & indexed on its own. Having to use this tool often is usually a sign that something else on the site is questionable. If that's the case, it's better to improve what's questionable.
— ? John ? (@JohnMu) October 28, 2021
Напомним, что ранее в этом месяце Microsoft и Яндекс представили API для быстрой индексации контента IndexNow. Эта инициатива вызвала смешанные реакции в отрасли.