Мобильный Яндекс и Яндекс.Браузер на Android научились переводить текст на картинках

Мобильные приложения Яндекс и Яндекс.Браузер на Android начали переводить текст на картинках. Благодаря этому пользователям будет удобнее делать покупки и искать информацию со смартфона на зарубежных сайтах.

Напомним, в апреле Яндекс.Браузер стал первым браузером для компьютеров, который научился переводить тексты, отдельные фразы и картинки сразу на странице сайта. Функция оказалась востребована, поэтому теперь она появляется и в приложениях Яндекса. 

Принцип работы функции такой же, как и в десктопной версии. На этапе перевода страницы появится возможность перевести не только текст, но и все картинки. А чтобы перевести конкретное изображение, достаточно выбрать соответствующий пункт в контекстном меню.

Перевод картинок доступен благодаря комбинации технологий машинного перевода и компьютерного зрения. Сначала на странице находятся картинки и с помощью компьютерного зрения на них выделяется текст – и чем причудливее шрифт, тем сложнее эта задача. Затем текст отправляют Яндекс.Переводчику, который может перевести картинки со смартфона на 47 языков. Поднобней о работе технологии можно прочесть в блоге Яндекс.Браузера. 

Ранее Яндекс сообщил о прототипе переводчика видео в Яндекс.Браузере, который позволяет смотреть ролики на иностранном языке. Новая технология, не имеющая аналогов в мире, объединила в себе машинный перевод, технологии биометрии, распознавания и синтеза речи.