Яндекс запустил новую версию технологии перевода текста на фотографии и изображения на основе нейронных сетей. Теперь изображения переводятся с учетом контекста. Кроме того, переведенный текст теперь больше похож на исходный макет и его легче читать.
Технология фотоперевода пригодится, когда нужно быстро перевести текст в изображение. Например, меню ресторана или техническая документация.
Шаблон семейства YandexGPT понимает стиль исходного текста и может сохранять каламбуры, например, на фотографиях рекламных слоганов или газетных заголовков. Новые технологии на основе нейронных сетей позволили подбирать более точные формулировки в многозначных предложениях и не переводить выражения буквально. В результате повысилось качество перевода простых текстов, таких как состав косметических средств, и сложных, таких как журналистские статьи, энциклопедии и инструкции.
Чтобы чтение переведенных текстов было удобнее, Яндекс улучшил их визуализацию. Технология удаляет исходный текст с изображения и отображает перевод сверху, оставляя шрифт, размер и цвет букв близкими к оригиналу. Переведенный текст выглядит немного более контрастным, чтобы его было легче читать.
Технология перевода фотографий работает на нейронных сетях YandexGPT. Обновление уже доступно в переводчике и браузере, а в «Умной камере» появится позже.
Напомним, Яндекс представил новое поколение нейросети YandexART 2.0.
Источник: пресс-релиз Яндекса
