Алиса AI научилась лучше генерировать изображения с русскоязычным текстом

Пресс-служба «Яндекса» рассказала Хабру про обновление модели для генерации изображений Alice AI ART. Нейросеть теперь точнее работает с русскоязычными текстами на картинках. Благодаря этому пользователи могут создавать изображения с более длинными и корректными текстами на русском языке.

Для новой версии Alice AI ART разработчики собрали собственный датасет изображений с русскоязычными надписями и детальной разметкой текста. Кроме того, изменили и архитектуру модели. После обновления нейросеть в три раза чаще генерирует картинки с корректным текстом — без ошибок и с полностью читаемыми буквами.

Для лучшего результата рекомендуют заключать в кавычки текст, который должен быть надписью на изображении, писать сложные слова заглавными буквами и разбивать длинные надписи на более короткие фразы.

Помимо этого улучшили и общую генерацию картинок. Доля изображений без визуальных искажений выросла на треть. Вместе с этим модель стала лучше понимать русский культурный код. Для этого модель оснастили системой, которая преобразует запросы в конкретные визуальные образы.

Модель доступна и для бизнеса на платформе Yandex AI Studio. С помощью нового инструмента Image Generation Tool можно использовать нейросеть в агентских сценариях.