Команда Wan из Tongyi Lab (Alibaba) презентовала новую модель ИИ для создания анимации на основе изображений и видео — Wan2.2-Animate.
Эта технология способна преобразовывать статичные картинки в анимацию, используя референсное видео, а также заменять персонажей прямо в существующих роликах. Важно отметить, что проект полностью открыт — доступны как код, так и веса модели (Apache-2.0). Вы можете скачать и установить его на своём устройстве.
Читайте также: 5 лучших приложений для генерации видео
Возможности нейросети Wan 2.2-Animate
Новая модель ИИ выполняет две основные функции.
Анимация с вашим персонажем. Вы можете взять любое видео с движениями или речью (например, танец из TikTok) — и модель «переснимает» его с вашим персонажем или изображением. Этот режим называется анимация фото и работает на основе референса.
Замена персонажа в любом видео. Если вы хотите оказаться в «Матрице» или в бою из Mortal Kombat — просто загрузите нужный фрагмент, и модель вставит вас в него. Чтобы результат выглядел естественно, используется Relighting LoRA, которая настраивает освещение и цветовую палитру сцены.
Таким образом, это инструмент не для «создания всего с нуля», а именно для интеграции вас или вашего персонажа в уже готовое видео.
Чем модель отличается от аналогичных решений? Ранее доступные инструменты для анимации и замены страдали от неестественной мимики, искажённого света и цвета — из-за этого персонаж «выпадал» из сцены, и авторам приходилось вручную корректировать видео.
Wan2.2-Animate решает эти проблемы: модель отдельно управляет скелетом и лицом, а при замене регулирует освещение, что делает ролики более реалистичными и не требующими постобработки.
Это интересно: 25 нейросетей для генерации изображений
Как использовать Wan2.2-Animate бесплатно
Чтобы создать ИИ-анимацию с помощью нейросети Wan2.2-Animate-14B, перейдите на Hugging Face. Там можно найти примеры и готовые кнопки для запуска.
1. Анимация фото
Загрузите своё изображение — это может быть портрет, селфи или фото за рабочим столом.
Далее добавьте референс-видео — любое, где присутствуют движения или эмоции. Например, сцена из фильма, где герой эмоционально спорит или танцует.
Выбираете внизу «Mode — Wan2.2- animate-move» и нажимаете «Generate Video». Модель «анализирует» движения и накладывает их на ваше фото. В итоге получится видео, где ваш персонаж говорит и движется как актёр из выбранного видео. Вот волк, ставший ведущим новостей:
2. Режим замены персонажа
Этот вариант подходит тем, кто хочет появиться в чужом ролике. Загружаете изображение персонажа или себя.
Добавляете готовое видео — например, танец Джокера на лестнице или тот самый кринжовый танец Питера Паркера.
Выбираете внизу «Mode — Wan2.2- animate-mix» и нажимаете «Generate Video». Модель аккуратно заменяет персонажа в видео на вас. Чтобы всё выглядело естественно, используется Relighting LoRA — она подстраивает освещение и цвета под сцену. В результате создаётся эффект, будто вы сами снялись в этом эпизоде.
Что это значит для индустрии
Самое главное — Wan2.2-Animate бесплатна и доступна для общего пользования. Можно скачать веса и код, запустить на своём компьютере или сразу протестировать в демо. Никаких подписок, лимитов и скрытых условий — лицензия Apache-2.0 позволяет использовать модель даже в коммерческих проектах.
Для сравнения:
- Runway Gen-3 — от $12 в месяц, но минуты видео быстро заканчиваются.
- Pika Labs — от $8 в месяц, с расширенными тарифами $28 и $76.
- Higgsfield — тарифы начинаются от $9 и доходят до $149 в месяц.
По сути, Wan2.2-Animate предоставляет функционал уровня дорогих сервисов, но в формате open source. Это редкий случай, когда технология, которая могла бы стоить десятки долларов в месяц, становится доступной каждому — от энтузиаста до профессионала.
Где можно использовать:
- ИИ-креаторы. Оживление иллюстраций, создание VTuber-роликов, генерация рекламных видео без актёров.
- Блогеры. Запись сценок, пародий, вставка себя в фильмы или мемные моменты.
- Студии. Замена персонажей или брендов, локализация видео без повторных съёмок.
- Разработчики. На базе модели можно создать сервис или Telegram-бота.
- Образование. Создание обучающих видео, симуляций, цифровых преподавателей.
- Бизнес. Генерация корпоративных видео, виртуальных аватаров для онлайн-поддержки.
Кратко о главном
В общем — используем, тестируем, всё бесплатно. Wan2.2 уже не просто одна модель, а целая экосистема: летом добавили интеграции с ComfyUI и Diffusers, в августе вышла версия для генерации видео по голосу, а теперь ещё и инструмент для анимации и замены персонажей. Alibaba действительно собирает полный набор для работы с видео — от генерации до монтажа, и всё в открытом доступе.
Если вам нужна инструкция о том, как развернуть модель на своём компьютере — оставляйте запрос в комментариях.
Больше полезных гайдов по нейросетям:
- Промты для генерации видео в нейросетях
- 12 способов очеловечить текст от нейросети
- Как пользоваться нейросетью Qwen на русском
