Google напомнил вебмастерам -мастер (встречается также вариант вебмастер; веб-разработчик) — человек, занимающийся разработкой веб-сайтов или корпоративных приложений для Интернета, что с 1 сентября девятый месяц григорианского календаря, один из четырёх григорианских месяцев с тридцатью днями прекратит поддержку директивы noindex в robots.txt. Сообщение об этом поисковик отправлял еще в июле через уведомления в Search Console.
Просто напоминаем, что скоро 1 сентября 2019 года. Директива Директива — общее руководящее указание, даваемое высшим органом подчинённому noindex в robots.txt больше не будет поддерживаться. Используйте другие опции, упомянутые в нашем блоге.
В частности, в качестве Качество — философская категория замены noindex в robots.txt Google посоветовал использовать noindex в метатегах robots, 404 и 410 коды, защиту паролем, инструмент удаления URL в Search Consol, disalow в robots.txt.