Сбер создал модель Emojich для создания эмодзи по текстовому описанию на базе нейросети ruDALL-E (XL). Это продолжение развития мультимодального вектора в обучении нейронных сетей командой Sber AI.
?Мы регулярно применяем язык эмодзи при общении в мессенджерах. Но при этом он достаточно ограничен теми вариантами, которые нам предлагает та или иная коммуникационная платформа. Поэтому нами была создана специальная модель для визуализации любой фразы в форме эмодзи. Для этого достаточно лишь описать желаемое и сгенерировать кастомизированный стикер или целый стикерпак. Уверен, что данный инструмент будет удобным и востребованным?, — заявил исполнительный вице-президент СТО Сбербанк Груп Давид Рафаловский.
Новая модель подходит для создания собственных эмодзи для общения в мессенджерах. Протестировать технологию можно в Телеграм-боте, на сайте и в приложении Салют, достаточно сказать ?Салют, включи художника?, а затем попросить сгенерировать смайлик или эмодзи. Кроме того, код модели находится в открытом доступе — с ним можно ознакомиться в официальном репозитории ruDALL-E (https://github.com/sberbank-ai/ru-dalle) на github.
ruDALL-E — нейросеть, созданная командами Sber AI и SberDevices. Модель моделирует совместное распределение текстовых последовательностей на русском языке и изображений и позволяет в итоге генерировать изображения по заданному русскоязычному описанию.
Emojich – ?младший брат? модели ruDALL-E с 1.3 млрд параметров. И если проект по обучению ruDALL-E стал самым большим нейросетевым вычислительным проектом в России и СНГ, то новую модель можно считать первым официальным применением модели ruDALL-E и необходимым ее развитием в продуктовом направлении.