«Яндекс.Браузер» теперь может переводить текст на картинке

В новой функции задействованы «Яндекс.Переводчик» и технологии компьютерного зрения. Ранее «Браузер» мог переводить лишь текст на странице, но важная информация по типу анонса концерта или распродажи может быть размещена и на картинке.

Такие тексты отныне можно переводить без необходимости загрузки специальных расширений. Руководитель «Яндекс.Браузера» Роман Иванов считает, что языковой барьер мешает людям познавать новое, ограничивая их контентом на родном языке:

Одна из задач команды «Браузера» — помочь людям преодолеть этот барьер, чтобы они комфортно чувствовали себя на любых сайтах. Мы давным-давно встроили в «Яндекс.Браузер» перевод текста, сегодня научили его переводить картинки и уже знаем, чему будем учить дальше.

В нём можно переводить сразу все картинки или по одной, для этого надо выбрать соответствующий пункт в контекстном меню. Если пользователю необходимо перевести весь сайт, на картинках появится кнопка «Перевести», а если нужен перевод всех картинок, проще открыть меню «Яндекс.Переводчика», в адресной строке и выбрать нужный пункт.

Сначала «Браузер» находит картинки и при помощи компьютерного зрения пытается выделить на них текст. В компании добавляют, что чем он причудливее, тем сложнее эта задача. Далее текст отправляется «Переводчику», который знает больше 90 языков.

Если перевод сильно отличается от оригинала по длине, то он выводится в отдельном окошке. Нововведение доступно в «Яндекс.Браузере» для Windows и бета-версии для Android. В ближайшее время функцию обещают добавить в версии для остальных десктопных платформ, а до конца года — для iOS.