Нейросеть Шедеврум реализовала генерацию видео

Нейросетями, которые генерируют картинки, уже никого не удивишь. Компания Яндекс пошла дальше и начала тестировать генерацию видео с помощью своей нейросети «Шедеврум».

Видео генерируются при помощи метода каскадной диффузии, что позволяет создавать уникальные и разнообразные контенты. Процесс начинается с создания изображений, соответствующих запросу, после чего они постепенно улучшаются, обогащаясь деталями.

Нейросеть способна генерировать видео с частотой смены кадров 24fps и длительностью 4 секунды. Пользователи могут поделиться результатами со своими друзьями или сохранить видео в формате MP4.

В настоящее время функция находится в режиме тестирования и доступна только активным пользователям «Шедеврума». Однако сгенерированные видео могут быть просмотрены всеми пользователями в ленте нейросети.

«Шедеврум» был представлен компанией «Яндекс» в апреле 2023 года. Наша нейросеть состоит из 5 миллиардов параметров и была обучена на 330 миллионах примеров, состоящих из пар картинок и текстовых описаний.

Шедеврум» способен создавать изображения в различных стилях. Однако пользователи не смогут создавать контент, содержащий отсылки к конкретным людям, политике, религии, а также контент, связанный с категорией 18+, жестокостью и насилием. Эти ограничения были введены с целью предотвращения оскорблений и использования «Шедеврума» для создания дипфейков.