Как «оживить» мемы с помощью нейросети

В твиттере новый тренд — пользователи соцсети превращают популярные мемы в видео. Оказалось, что таким образом они тестируют новую функцию нейросетей, позволяющую анимировать изображение или его часть. Рассказываем, как это можно сделать. 

Функцию, позволяющую анимировать картинки, запустили в ноябре сразу две компании Stability AI и Runway. Первая представила нейросеть Stable Video Diffusion. Она позволяет создавать по текстовому описанию короткие анимированные видео. А Runway презентовала функцию Motion Brush, с помощью которой можно также «оживить» всё изображение или его конкретный участок.

Пользователи соцсети чаще тестируют возможности нейросети от Runway, поскольку воспользоваться ей проще. Первые несколько картинок сервис позволяет сгенерировать бесплатно.

Чтобы воспользоваться сервисом, нужно:

— зарегистрироваться на сайте компании. Войти можно, например, через аккаунт в Google. Далее надо выбрать инструмент Text/image to Video;

— затем нужно загрузить выбранную картинку, при необходимости выбрать, какую её часть вы хотите анимировать, и нажать кнопку Generate. Получившееся видео можно сохранить на ваше устройство. 

Важно: в пробной версии пользователю даётся 100 бесплатных секунд на генерацию анимированных картинок. На создание одной уходит примерно 4 секунды.

Редакция «Горящей Избы» тоже не удержалась и «оживила» парочку мемов. Честно говоря, анимация выглядит немного пугающей: глаза у персонажей мемов получаются «пустыми». Да и без ляпов тоже не обходится. Например, на одной из картинок нейросеть вместо анимации просто удалила кисть руки у героя. Но в целом мемы стали выглядеть интереснее.