На днях сотрудник Google Джон Мюллер заявил в Twitter, что большинство поисковых алгоритмов Google работают по всем языкам, но есть исключения. Например, Product Reviews Update и некоторые другие.
We have lots of algorithms. I assume you mean search, and the answer is mosty yes, but also no. Understanding text is hard, and sometimes we start somewhere (a language) first. Also, some languages/countries have different availability of rich results types.
— ? John ? (@JohnMu) December 23, 2021
По его словам, понимание текста – это сложная задача. Поэтому те алгоритмы, которые связаны с контентом, сложнее локализировать.
Another fun one that I recently ran across was how basic sorting algorithms (which we use a lot too) vary across languages & scripts. How do you sort words in Persian? For example, apparently in Japanese (I hope someone can correct me), it's not trivial to sort proper nouns.
— ? John ? (@JohnMu) December 23, 2021
Это также влияет на доступность расширенных результатов в отдельных странах. В некоторых регионах доступны не все.
Часть алгоритмов сначала запускаются только на одном языке – обычно это английский, а затем – на всех языках. Например, BERT.
Отметим, на днях Мюллер напомнил, что недавнее обновление в ранжировании отзывов о товарах (December 2021 Product Reviews Update) пока запущено только для контента на английском языке, но в будущем Google планирует расширить его и на другие языки.