Яндекс представил новую версию технологии перевода текста на фото и изображениях на базе нейросетей. Компания одной из первых в мире применила большую языковую модель, чтобы переводить картинки с учётом контекста.
Модель семейства YandexGPT понимает стиль оригинального текста и может сохранить игру слов, например, на фотографиях рекламных слоганов или газетных заголовков.
Технология стирает оригинальный текст с изображения и располагает новый, переведённый поверх него: алгоритмы подбирают шрифт, размер и цвет букв, убирают различные помарки таким образом, чтобы переведённые изображения выглядели максимально естественно. Новая модель способна распознавать стиль оригинального текста и может сохранить игру слов. Нейросеть распознаёт переносы слов и может понять их значение, даже если в кадр попала только часть текста.
Новая версия уже доступна в «Переводчике» и «Браузере». Позже обещают добавить в «Умную Камеру».
Приглашаем к участию
С 17 по 20 июля 2024 фестивальное Движение «Книжные маяки России» вышло на новый уровень продвижения книжной культуры в регионы. На четыре дня почти весь центр Выборга превратился в большое читающее пространство. На очереди – Ульяновск!