Нейросеть Яндекса научилась генерировать видео в Шедевруме
Новости Интернет
Яндекс первым на российском рынке запустил технологию создания видео с помощью нейросети для пользователей, говорится в сообщении компании. Такая возможность появилась в Шедевруме: в ответ на запросы приложение генерирует короткие ролики. Они могут стать основой для музыкальных клипов, анимации, динамических аватарок в соцсетях и позволят воплотить в жизнь другие креативные идеи.
Шедеврум генерирует видео длиной четыре секунды с частотой 24 кадра в секунду. После публикации ими можно поделиться с друзьями или сохранить в формате MP4. Сейчас функция работает в режиме тестирования. Генерация видео доступна активным пользователям Шедеврума, а посмотреть результаты в ленте приложения могут все.
Для того, чтобы сгенерировать видео в Шедевруме, нужно описать текстом то, что хочется увидеть. В ответ приложение предложит четыре варианта первого кадра и набор анимационных эффектов для создания движения. Нейросеть берет за основу выбранное пользователем изображение, генерирует набор его изменённых версий и объединяет всё выбранным эффектом. Сейчас их семь: зум (приближение), таймлапс (ускоренная перемотка), полет, панорама, вращение, подъём и морфинг (постепенное изменение).
Для создания кадров будущего видео используется метод каскадной диффузии. С помощью этой технологии Шедеврум генерирует отдельные изображения. Сначала нейросеть создает картинки в соответствии с запросом, а затем поэтапно увеличивает их разрешение, насыщая деталями.
Генерация видео дополняет другие возможности Шедеврума — создание изображений и текстовых постов с заголовком и иллюстрацией.
Яндекс представил Шедеврум в апреле 2023 года. Нейросеть Шедеврума содержит 5 миллиардов параметров и обучалась на 330 миллионах примеров пар картинок с текстовым описанием.
|
Все рубрики статей (938 / 938):
|
|
