Alibaba выпустила бесплатную нейросеть для анимации персонажей по одному фото - «Новости мира Интернет» » Новости мира Интернет
Что показали на CES 2026. Часть 1 - «Новости мира Интернет»
Что показали на CES 2026. Часть 1 - «Новости мира Интернет»
NVIDIA анонсировала официальный запуск GeForce NOW на Linux - «Новости мира Интернет»
NVIDIA анонсировала официальный запуск GeForce NOW на Linux - «Новости мира Интернет»
Что показали на CES 2026. Часть 2 - «Новости мира Интернет»
Что показали на CES 2026. Часть 2 - «Новости мира Интернет»
Выпущена десктопная версия браузера Samsung Internet для Windows - «Новости мира Интернет»
Выпущена десктопная версия браузера Samsung Internet для Windows - «Новости мира Интернет»
OpenAI анонсировала бесплатный переводчик с поддержкой русского языка - «Новости мира Интернет»
OpenAI анонсировала бесплатный переводчик с поддержкой русского языка - «Новости мира Интернет»
Вышел Wine 11 — запуск Windows-приложений и игр в Linux и macOS стал почти «родным» - «Новости сети»
Вышел Wine 11 — запуск Windows-приложений и игр в Linux и macOS стал почти «родным» - «Новости сети»
Глава Google DeepMind считает, что китайские разработчики ИИ-моделей отстают от американских лишь на несколько месяцев - «Новости сети»
Глава Google DeepMind считает, что китайские разработчики ИИ-моделей отстают от американских лишь на несколько месяцев - «Новости сети»
Две игры в одной: Capcom показала геймплей Resident Evil Requiem за Грейс и Леона - «Новости сети»
Две игры в одной: Capcom показала геймплей Resident Evil Requiem за Грейс и Леона - «Новости сети»
Nvidia настаивает, что сокращений в номенклатуре GeForce RTX 50 нет, но есть проблемы с поставками - «Новости сети»
Nvidia настаивает, что сокращений в номенклатуре GeForce RTX 50 нет, но есть проблемы с поставками - «Новости сети»
США вслед за Россией и Китаем пообещали построить атомную электростанцию на Луне - «Новости сети»
США вслед за Россией и Китаем пообещали построить атомную электростанцию на Луне - «Новости сети»
Новости мира Интернет » Новости интернета » Alibaba выпустила бесплатную нейросеть для анимации персонажей по одному фото - «Новости мира Интернет»

Alibaba представила новую модель Wan 2.2 Animate с открытым исходным кодом, которая умеет превращать статичные изображения в реалистичные видеоролики. Нужно загрузить фото персонажа и ролик с движениями, и система «оживит» изображение: повторит мимику, позы и пластику тела.



Модель работает в двух режимах. В первом она переносит движения из драйв-видео на героя с фотографии и создает новое видео. Во втором – заменяет персонажа в самом ролике: фон и сцена сохраняются, но вместо оригинального человека появляется выбранный персонаж. Можно ограничиться заменой лица или полностью заменить тело с точной синхронизацией губ и сохранением освещения.




Alibaba выпустила бесплатную нейросеть для анимации персонажей по одному фото - «Новости мира Интернет»


Источник: Alibaba (здесь и на обложке)



По сравнению с предыдущей версией, качество анимации заметно выросло. Разработчики добились большей точности передачи эмоций и движений благодаря объединению скелетных и лицевых сигналов. Также модель использует архитектуру «смеси экспертов», когда разные модули обрабатывают участки с разным уровнем шума. База данных для обучения тоже увеличилась – на 65% больше изображений и на 83% больше видеоматериалов.



Wan 2.2 Animate входит в семейство моделей Wan 2.2 для генерации видео из текста и озвучки. Скачать инструмент можно на GitHub и Hugging Face, доступен он и через API на Alibaba Cloud. Для полноценного локального запуска потребуется мощная видеокарта уровня Nvidia RTX 4090 с большим объемом памяти, хотя упрощенная версия может работать в 720p при 24 fps и на более «доступных» конфигурациях.

Цитирование статьи, картинки - фото скриншот - Rambler News Service.
Иллюстрация к статье - Яндекс. Картинки.
Есть вопросы. Напишите нам.
Общие правила  поведения на сайте.

Alibaba представила новую модель Wan 2.2 Animate с открытым исходным кодом, которая умеет превращать статичные изображения в реалистичные видеоролики. Нужно загрузить фото персонажа и ролик с движениями, и система «оживит» изображение: повторит мимику, позы и пластику тела. Модель работает в двух режимах. В первом она переносит движения из драйв-видео на героя с фотографии и создает новое видео. Во втором – заменяет персонажа в самом ролике: фон и сцена сохраняются, но вместо оригинального человека появляется выбранный персонаж. Можно ограничиться заменой лица или полностью заменить тело с точной синхронизацией губ и сохранением освещения. Источник: Alibaba (здесь и на обложке) По сравнению с предыдущей версией, качество анимации заметно выросло. Разработчики добились большей точности передачи эмоций и движений благодаря объединению скелетных и лицевых сигналов. Также модель использует архитектуру «смеси экспертов», когда разные модули обрабатывают участки с разным уровнем шума. База данных для обучения тоже увеличилась – на 65% больше изображений и на 83% больше видеоматериалов. Wan 2.2 Animate входит в семейство моделей Wan 2.2 для генерации видео из текста и озвучки. Скачать инструмент можно на GitHub и Hugging Face, доступен он и через API на Alibaba Cloud. Для полноценного локального запуска потребуется мощная видеокарта уровня Nvidia RTX 4090 с большим объемом памяти, хотя упрощенная версия может работать в 720p при 24 fps и на более «доступных» конфигурациях.

0

Смотрите также

А что там на главной? )))



Комментарии )))