Яндекс представил нейросеть YandexART
Новости Программы
Компания Яндекс представила диффузионную нейросеть YandexART (Yandex AI Rendering Technology), которая создает изображения и анимацию в ответ на текстовые запросы пользователей.
Как отмечается в сообщении компании, нейросеть YandexART понимает российский культурный код — она знает известные места и города России, выдающихся личностей разных эпох и знакомых всем с детства персонажей мультфильмов и сказок, например, Чебурашку, богатырей и Бабу-Ягу.
Сейчас нейросеть YandexART интегрирована в приложение Шедеврум и помогает иллюстрировать рекламные объявления в Яндекс Бизнесе, а в ближайшее время появится в Клавиатуре и других сервисах компании.
Как поясняют разработчики, YandexART формирует изображения и анимацию методом каскадной диффузии: сначала нейросеть генерирует картинки и кадры в соответствии с запросом пользователя, а затем поэтапно увеличивает их разрешение, насыщая деталями. По сравнению с предыдущим поколением диффузионной модели, которая использовалась в Шедевруме, YandexART создает более реалистичную и детализированную графику. По итогам внутренней оценки асессоров Яндекса ее результаты лучше в 60% случаев.
Для улучшения качества работы нейросети разработчики увеличили размер обучающего набора данных в 1,5 раза — до 330 миллионов картинок с текстовым описанием. Для обучения YandexART используются самые эстетичные картинки, которые отбираются при помощи трех режимов фильтрации. Новый алгоритм распознавания текстов помогает нейросети лучше понимать пожелания пользователей. Помимо этого, нейросеть качественнее прорабатывает особенности лиц, глаз и рук, благодаря чему она может создавать фотореалистичные портреты.
Для улучшения качества генерации изображений используется дообучение с подкреплением. Специалисты компании отсматривают, например, сразу несколько сотен или тысяч созданных с помощью YandexART капибар и отмечают удачные и неудачные изображения. Это позволяет нейросети понять, как именно лучше и правильнее изображать животных, персонажей, объекты, явления и не только, говорится в сообщении компании.
|
|
|
