Инструмент преобразует любое статическое изображение в анимацию.

Помогаем

Runway — компания, стоящая за разработкой генератора изображений Stable Diffusion в сотрудничестве со Stability AI, выпустила новый инструмент Motion Brush, позволяющий анимировать любое статическое изображение или его отдельные фрагменты.

Пользователи быстро нашли применение нейросетям и анимировали популярные статические мемы, вот несколько примеров из соцсетей:

Bad Luck Brian made it, don’t worry! #classic #ai #meme #animated #runwayml #genfill #badluckbrian pic.twitter.com/WQyIVDdzNT

— Ionut «John» Burchi (@burconsult) November 26, 2023

Bringing to life some favorite memes with @runwayml pic.twitter.com/BfLeHvadc8

— AI Optimist (@AI__Optimist) November 24, 2023

Thought about getting in on this meme animating thing

But that’s none of my business.#AI #runwayml @runwayml @IXITimmyIXI pic.twitter.com/UDIqFUwFBL

— Christopher Fryant (@cfryant) November 25, 2023

The @runwayml image2video #Gen2 fanatics can relate Drake! 😂 pic.twitter.com/2viB3qcsFH

— Uncanny Harry AI (@Uncanny_Harry) July 26, 2023

Чтобы использовать инструмент Motion Brush, нужно зарегистрироваться на сайте — по электронной почте или используя единый вход от Apple или Google. Далее вас направят на страницу проекта, где нужно нажать опцию «‎click start with image» и выбрать файл со своего компьютера (или сгенерировать изображение прямо на сайте с помощью текстового описания).

Далее нажимайте кнопку Motion Brush и с помощью кисти выбирайте фрагмент, который планируете анимировать. В то же время, чтобы удалить водяной знак, нужно оформить платную подписку.

Между тем, Stability AI выпустила собственную модель Stable Video Diffusion, которая, вероятно, и легла в основу инструмента Runway. Хотя в описании к анонсу компания отмечает, что модель в тестах проявила себя «лучше соответствующих моделей Runway и Pika Labs». В отличие от Motion Brush, Stable Video Diffusion в настоящее время доступна только для исследовательских целей, а не для реальных или коммерческих приложений. Потенциальные пользователи могут зарегистрироваться, чтобы попасть в список ожидания для доступа.

Похоже, компании из-за внутренних конфликтов выпускают один и тот же продукт под разными названиями. Ранее Stability AI финансировала разработку технологии Runway, лежащей в основе Stable Diffusion, но после запуска генератора изображений ни словом не упомянула о стартапе, присвоив себе все заслуги. Так же сейчас немецкий стартап не упоминает модель Stable Video Diffusion в анонсе к своему Motion Brush, хотя инструменты, похоже, работают идентично.