Гайда випробовувати Motion Brush — нову нейромережу Runway, що «‎оживляє» відомі меми

Інструмент перетворює будь-яке статичне зображення на анімацію.

Runway — компанія, яка стоїть за розробкою генератора зображень Stable Diffusion у співпраці з Stability AI, випустила новий інструмент Motion Brush, що дозволяє анімувати будь-яке статичне зображення або його окремі фрагменти.

Користувачі швидко знайшли застосування нейромережам — та анімували відомі статичні меми, ось кілька прикладів із соцмереж:

Bad Luck Brian made it, don’t worry! #classic #ai #meme #animated #runwayml #genfill #badluckbrian pic.twitter.com/WQyIVDdzNT

— Ionut «John» Burchi (@burconsult) November 26, 2023

Bringing to life some favorite memes with @runwayml pic.twitter.com/BfLeHvadc8

— AI Optimist (@AI__Optimist) November 24, 2023

Thought about getting in on this meme animating thing

But that’s none of my business.#AI #runwayml @runwayml @IXITimmyIXI pic.twitter.com/UDIqFUwFBL

— Christopher Fryant (@cfryant) November 25, 2023

The @runwayml image2video #Gen2 fanatics can relate Drake! 😂 pic.twitter.com/2viB3qcsFH

— Uncanny Harry AI (@Uncanny_Harry) July 26, 2023

Аби використати інструмент Motion Brush потрібно зареєструватись на сайті — через електронну пошту або використавши єдиний вхід від Apple або Google. Далі вас спрямують на сторінку проєкту, де треба натиснути опцію «click start with image» і обрати файл зі свого комп’ютера (або згенерувати зображення просто на сайті за допомогою текстового опису).

Далі натисніть кнопку Motion Brush і за допомогою пензля обрати фрагмент, який плануєте анімувати. Водночас аби видалити водяний знак, потрібно оформити платну передплату.

Тим часом Stability AI випустила власну модель Stable Video Diffusion, яка, ймовірно, і лягла в основу інструменту Runway. Хоча в описі до анонсу компанія зазначає, що модель у тестах проявила себе «‎краще за відповідні моделі Runway і Pika Labs». На відміну від Motion Brush, Stable Video Diffusion на цей час доступна лише для дослідницьких цілей, а не для реальних або комерційних застосувань. Потенційні користувачі можуть зареєструватися, щоб потрапити в список очікування для доступу.

Схоже, компанії через внутрішні конфлікти випускають один і той самий продукт під різними назвами. Раніше Stability AI фінансувала розробку технології Runway, що лежить в основі Stable Diffusion, але після запуску генератора зображень ані словом не обмовилась про стартап, присвоївши собі усі заслуги. Так само зараз німецький стартап не згадує модель Stable Video Diffusion в анонсі до свого Motion Brush, хоча інструменти, схоже, працюють ідентично.