Штучний інтелект Video LDM від NVIDIA дозволяє генерувати відео з коротких та простих текстових описів. Наразі доступне створення коротких роликів (4,7 с) у режимі до 2048х1280 з 24 FPS.

Механізм Latent Diffusion Models дозволяє створювати відео з тексту без використання потужного заліза. Для його роботи використовується рушій Stable Diffusion. Принцип LDM полягає у створенні відео з окремих зображень (і тренуванні ШІ на них): ролик насправді є послідовністю згенерованих картинок.

NVIDIA розмістила на своєму сайті багато прикладів робіт Video LDM, включаючи експериментальні довші ролики. Публічна версія нейромережі поки що недоступна, компанія не розкриває термінів релізу.

NVIDIA представила апаратні прискорювачі для ChatGPT, обробки відео за допомогою ШІ, генеративних та інших моделей

Джерело: NVIDIA