Google добавил новую директиву для метатега robots
Google начал поддерживать новую директиву для метатега robots – indexifembedded. Она предназначена для индексации контента, встроенного на другие страницы – даже если исходная страница, где изначально был размещен этот контент, закрыта тегом noindex.
Теперь у владельцев сайтов будет больше контроля над индексацией их контента.
Зачем добавлять новый тег
В Google объяснили, что издатели не всегда хотят, чтобы индексировался их контент, встроенный на другие страницы. Новый тег позволит им сообщать о своих предпочтениях Googlebot.
Indexifembedded работает в сочетании с noindex, но только в том случае, если страница с noindex встроена на другую страницу через iframe или аналогичный HTML-тег, например, object.
Возможные варианты использования
Сотрудник Google Джон Мюллер объяснил, что новый тег может использоваться для виджетов или встроенного контента, когда нужно, чтобы контент индексировался, только когда он встроен на другую страницу.
A "common" (it's new, so there's nothing common yet :)) use-case would be widgets or embedded content, where you have a special URL for the embed that you don't want indexed, but you still want to allow the embedding page to use it for indexing. Eg, video embeds.
— ? John ? (@JohnMu) January 21, 2022
Примеры реализации
Метатег robots:
X-Robots:
Другие поисковые системы
На данный момент новый тег поддерживается только Google. Поэтому везде указывается <meta name=»googlebot»>.