Alibaba выпустила бесплатную нейросеть для анимации персонажей по одному фото - «Новости мира Интернет» » Новости мира Интернет
Google представила Gemini 3 Pro и среду агентного программирования Antigravity - «Новости мира Интернет»
Google представила Gemini 3 Pro и среду агентного программирования Antigravity - «Новости мира Интернет»
Lumia Health анонсировала серьги, измеряющие приток крови к голове - «Новости мира Интернет»
Lumia Health анонсировала серьги, измеряющие приток крови к голове - «Новости мира Интернет»
Сбер выпустил Kandinsky 5.0 – новое поколение моделей для генерации изображений и видео - «Новости мира Интернет»
Сбер выпустил Kandinsky 5.0 – новое поколение моделей для генерации изображений и видео - «Новости мира Интернет»
Google объявила о лучших приложениях и играх на Android в 2025 году - «Новости мира Интернет»
Google объявила о лучших приложениях и играх на Android в 2025 году - «Новости мира Интернет»
Обновление Telegram: трансляции в историях, регулярные сообщения, аукционы подарков - «Новости мира Интернет»
Обновление Telegram: трансляции в историях, регулярные сообщения, аукционы подарков - «Новости мира Интернет»
«Столько циников!»: глава ИИ Microsoft раскритиковал недовольных нашествием ИИ-агентов в Windows - «Новости сети»
«Столько циников!»: глава ИИ Microsoft раскритиковал недовольных нашествием ИИ-агентов в Windows - «Новости сети»
Смартфоны Poco F7 и Poco X7 Pro сочетают яркий дизайн с высокой производительностью - «Новости сети»
Смартфоны Poco F7 и Poco X7 Pro сочетают яркий дизайн с высокой производительностью - «Новости сети»
NASA показало самые детальные изображения межзвёздной кометы 3I/ATLAS - «Новости сети»
NASA показало самые детальные изображения межзвёздной кометы 3I/ATLAS - «Новости сети»
Игровые видеокарты теперь приносят всего 7,5 % выручки Nvidia — ИИ-чипы разогнали доходы до $57 млрд - «Новости сети»
Игровые видеокарты теперь приносят всего 7,5 % выручки Nvidia — ИИ-чипы разогнали доходы до $57 млрд - «Новости сети»
AMD и Nvidia готовятся урезать или даже полностью остановить выпуск дешёвых видеокарт из-за глобального дефицита памяти - «Новости сети»
AMD и Nvidia готовятся урезать или даже полностью остановить выпуск дешёвых видеокарт из-за глобального дефицита памяти - «Новости сети»
Новости мира Интернет » Новости интернета » Alibaba выпустила бесплатную нейросеть для анимации персонажей по одному фото - «Новости мира Интернет»

Alibaba представила новую модель Wan 2.2 Animate с открытым исходным кодом, которая умеет превращать статичные изображения в реалистичные видеоролики. Нужно загрузить фото персонажа и ролик с движениями, и система «оживит» изображение: повторит мимику, позы и пластику тела.



Модель работает в двух режимах. В первом она переносит движения из драйв-видео на героя с фотографии и создает новое видео. Во втором – заменяет персонажа в самом ролике: фон и сцена сохраняются, но вместо оригинального человека появляется выбранный персонаж. Можно ограничиться заменой лица или полностью заменить тело с точной синхронизацией губ и сохранением освещения.




Alibaba выпустила бесплатную нейросеть для анимации персонажей по одному фото - «Новости мира Интернет»


Источник: Alibaba (здесь и на обложке)



По сравнению с предыдущей версией, качество анимации заметно выросло. Разработчики добились большей точности передачи эмоций и движений благодаря объединению скелетных и лицевых сигналов. Также модель использует архитектуру «смеси экспертов», когда разные модули обрабатывают участки с разным уровнем шума. База данных для обучения тоже увеличилась – на 65% больше изображений и на 83% больше видеоматериалов.



Wan 2.2 Animate входит в семейство моделей Wan 2.2 для генерации видео из текста и озвучки. Скачать инструмент можно на GitHub и Hugging Face, доступен он и через API на Alibaba Cloud. Для полноценного локального запуска потребуется мощная видеокарта уровня Nvidia RTX 4090 с большим объемом памяти, хотя упрощенная версия может работать в 720p при 24 fps и на более «доступных» конфигурациях.

Цитирование статьи, картинки - фото скриншот - Rambler News Service.
Иллюстрация к статье - Яндекс. Картинки.
Есть вопросы. Напишите нам.
Общие правила  поведения на сайте.

Alibaba представила новую модель Wan 2.2 Animate с открытым исходным кодом, которая умеет превращать статичные изображения в реалистичные видеоролики. Нужно загрузить фото персонажа и ролик с движениями, и система «оживит» изображение: повторит мимику, позы и пластику тела. Модель работает в двух режимах. В первом она переносит движения из драйв-видео на героя с фотографии и создает новое видео. Во втором – заменяет персонажа в самом ролике: фон и сцена сохраняются, но вместо оригинального человека появляется выбранный персонаж. Можно ограничиться заменой лица или полностью заменить тело с точной синхронизацией губ и сохранением освещения. Источник: Alibaba (здесь и на обложке) По сравнению с предыдущей версией, качество анимации заметно выросло. Разработчики добились большей точности передачи эмоций и движений благодаря объединению скелетных и лицевых сигналов. Также модель использует архитектуру «смеси экспертов», когда разные модули обрабатывают участки с разным уровнем шума. База данных для обучения тоже увеличилась – на 65% больше изображений и на 83% больше видеоматериалов. Wan 2.2 Animate входит в семейство моделей Wan 2.2 для генерации видео из текста и озвучки. Скачать инструмент можно на GitHub и Hugging Face, доступен он и через API на Alibaba Cloud. Для полноценного локального запуска потребуется мощная видеокарта уровня Nvidia RTX 4090 с большим объемом памяти, хотя упрощенная версия может работать в 720p при 24 fps и на более «доступных» конфигурациях.

0

Смотрите также

А что там на главной? )))



Комментарии )))