Мы приносим новости

 

Сбер представил Kandinsky 2.0 — первую российскую диффузионную модель для генерации изображений по тексту на разных языках

23.11.2022

На международной конференции по искусственному интеллекту (ИИ) Artificial Intelligence Journey Сбер представил Kandinsky 2.0 — первую российскую мультиязычную диффузионную модель для генерации изображений по текстовому описанию с 2 млрд параметров.

Нейросеть разработали и обучили исследователи Sber AI при партнёрской поддержке ученых из Института искусственного интеллекта AIRI на объединённом датасете Sber AI и SberDevices из 1 млрд пар «текст — изображение». Увидеть, как она рисует, можно на сайте FusionBrain, а также при помощи команды «Запусти художника» на умных устройствах Sber и в мобильном приложении Салют.

FusionBrain.ai – открытый портал для демонстрации моделей, приближающих мир к созданию AGI (Artificial General Intelligence, сильный искусственный интеллект) от Института AIRI, который Сбер решил поддержать, первым выложив свою модель на ресурсе. В будущем на сайте FusionBrain.ai будут доступны как генеративные, так и передовые мультимодальные и мультизадачные модели.

В Kandinsky 2.0 разработчики использовали набирающий популярность диффузионный подход, поскольку модели подобной архитектуры, в отличие от трансформеров, дают хорошие результаты почти во всех задачах генерации мультимедийного контента по текстовому описанию (синтез изображений, видео, 3D и аудио).

Модель способна одинаково быстро и качественно обрабатывать запросы на 101 языке. Среди них как распространённые русский и английский, так и более редкие, например, монгольский. Система поймёт задачу, даже если в одном запросе будут слова на разных языках.

Kandinsky 2.0 отличается от своего предшественника более сочной, глубокой и реалистичной картинкой и расширенными возможностями. На сайте FusionBrain изображения можно генерировать в 20 различных стилях, среди которых ренессанс, классицизм, мультипликация, Новый год и даже хохлома. В модели также реализованы функции inpainting (замена любой части изображения и любого объекта на изображении на сгенерированные нейросетью) и outpainting (возможность дорисовывать готовое изображение и фон вокруг картинки).

Кроме того, в Kandinsky 2.0 пользователи могут оценить, как одинаковые с точки зрения смысла лингвистические конструкции и понятия отличаются в зависимости от языка и культурной окраски. Например, если сформулировать запрос «национальное блюдо» на русском языке, нейросеть чаще всего рисует щи, а на японском это будет мисо суп и суши.

Александр Ведяхин, первый заместитель Председателя Правления Сбербанка:

«Мы продолжаем развивать решения для автоматической генерации изображений по описанию на естественном языке — так называемый креативный ИИ. Kandinsky 2.0, который пришёл на смену первой версии модели, — прорыв в этой сфере. Наша модель позволяет за несколько секунд получить уникальную картинку под конкретную задачу и свободно распространять её без лицензии, что очень актуально для бизнеса. Генеративные модели развиваются очень быстро: ещё четыре года назад даже постановку такой задачи сложно было представить, а сегодня мы имеем работающую модель, которая понимает 101 язык и рисует реалистичные изображения, которые зачастую неотличимы от тех, что создают люди».

Здравоохранение
02 декабрь 2022 12:45
02
декабрь
12:45
layer up

В Мордовии за сутки зарегистрирован 21 случай коронавируса

В Мордовии за минувшие сутки выявлен 21 случай заражения коронавирусом. Это на 50% больше, чем днем ранее, но в целом в Минздраве региона отмечают стабильную эпидемиологическую ситуацию. В больницах развернуто пока только 60 инфекционных коек.

01 декабрь 2022 12:44
01
декабрь
12:44
layer up

В Мордовии за сутки зарегистрировано 14 случаев коронавируса

В Мордовии за минувшие сутки выявлено 14 случаев заражения коронавирусом. Как отмечают в оперативном штабе республики по профилактике и контролю за распространением коронавирусной инфекции, сейчас в республике сложилась стабильная эпидемиологическая ситуация, во многом, благодаря профилактике.

30 ноябрь 2022 11:11
30
ноябрь
11:11
layer up

В Мордовии заболеваемость коронавирусом остается на низком уровне

В Мордовии за минувшие сутки выявлено 10 случаев заражения коронавирусом. Это самые низкие показатели за всю пандемию. По сравнению с соседними регионами в республике тоже ситуация более благополучная. Так, на текущую дату в Чувашии зарегистрировано 117 заболевших, в Марий Эл – 38, в Пензенской области – 67, Рязанской – 33, в Ульяновской области – 17.

29 ноябрь 2022 13:14
29
ноябрь
13:14
layer up

В Мордовии за сутки отмечено 11 случаев коронавируса

В Мордовии за минувшие сутки выявлено 11 случаев заражения коронавирусом. Это самые низкие показатели по сравнению с соседними регионами. Так, на текущую дату в Чувашии зарегистрировано 48 заболевших, в Марий Эл – 41, в Пензенской области – 62, Рязанской – 29, приблизительные значения в Ульяновской области – 12.

28 ноябрь 2022 11:52
28
ноябрь
11:52
layer up

В Мордовии впервые за пандемию число случаев снизилось до 10 в сутки

В Мордовии за минувшие сутки выявлено 10 случаев заражения коронавирусом. По сравнению с предыдущими, это на 23,1% меньше, а в целом за пандемию – минимальное значение.

В СЕТИ

Загрузка...

Загрузка...