В конце апреля появилось новое AI-инструмент — Framepack. Framepack способен генерировать простые видеоклипы на основе одного изображения и короткого текстового запроса (промпта). Что особенно важно — установка инструмента очень проста, а для генерации достаточно даже обычного потребительского ноутбука с видеокартой, имеющей 6 ГБ видеопамяти (VRAM).
Для создания 1-минутного видео (60 секунд) с частотой 30 кадров в секунду (всего 1800 кадров), при использовании модели 13B, требуется всего 6 ГБ VRAM.
Сама генерация происходит достаточно быстро — по словам автора, на RTX 4090 один кадр создаётся за 2,5 секунды (без оптимизации) или за 1,5 секунды в режиме teacache. На ноутбуках с видеокартами 3070ti или 3060 генерация происходит примерно в 4–8 раз медленнее.
Программа предоставляет возможность в реальном времени просматривать процесс создания видео.
Домашняя страница с множеством примеров созданных видеоклипов:
https://lllyasviel.github.io/frame_pack_gitpage/
Репозиторий проекта:
https://github.com/lllyasviel/FramePack
Скачать:
https://github.com/lllyasviel/FramePack/releases
Для создания 1-минутного видео (60 секунд) с частотой 30 кадров в секунду (всего 1800 кадров), при использовании модели 13B, требуется всего 6 ГБ VRAM.
Сама генерация происходит достаточно быстро — по словам автора, на RTX 4090 один кадр создаётся за 2,5 секунды (без оптимизации) или за 1,5 секунды в режиме teacache. На ноутбуках с видеокартами 3070ti или 3060 генерация происходит примерно в 4–8 раз медленнее.
Программа предоставляет возможность в реальном времени просматривать процесс создания видео.
Домашняя страница с множеством примеров созданных видеоклипов:
https://lllyasviel.github.io/frame_pack_gitpage/Репозиторий проекта:
https://github.com/lllyasviel/FramePackСкачать:
https://github.com/lllyasviel/FramePack/releases