Google больше не поддерживает директиву follow в метатеге robots
Сотрудник Google Джон Мюллер подтвердил, что Google больше не поддерживает директиву follow в метатеге robots.
SEO-консультант Сайрус Шепард обратил внимание, что «follow» отсутствует в списке действующих директив индексирования и показа контента в «Спецификациях метатега robots, атрибута data-nosnippet и HTTP-заголовка X-Robots-Tag».
Он написал об этом в Twitter и отметил в посте Мюллера.
TIL: Google's docs don't support the robots "follow" directive:
<meta name="robots" content="noindex, follow" />
Which nearly all SEO articles lists as a valid practice. Might've missed something, but does Google ignore follow directives now? cc @johnmuhttps://t.co/5O12E4Fn7C pic.twitter.com/JvaNASoI4P
— Cyrus (@CyrusShepard) July 20, 2021
В ответ Мюллер подтвердил, что это действительно так. Поэтому директиву follow можно не указывать:
Yeah, it's the default, so there's no need to specify it. It's like putting "allow: /" as the only directive in your robots.txt. Or like building a highway and adding a sign "cars allowed". It's not going to cause problems, but you're not surprising anyone either.
— ? John ? (@JohnMu) July 20, 2021