Alibaba обновила свою ИИ-модель для упрощения создания реалистичной анимации персонажей
- Облачное подразделение Alibaba представило обновленную ИИ-модель Animate Anyone 2.
- Это обновление позволяет пользователям создавать реалистичную анимацию персонажей, комбинируя одно изображение и видео.
- Анимированный персонаж сохраняет свою исходную среду для естественного вида.
Обновленная ИИ-модель облачных вычислений Alibaba, Animate Anyone 2, позволяет пользователям создавать реалистичную анимацию персонажей путем объединения одного изображения с видео.
Согласно отчету SCMP, эта система совершенствует предыдущие методы, основанные на сигналах движения, за счет добавления информации об окружающей среде из эталонного контента.
Исследовательская работа лаборатории Tongyi лаборатории Alibaba Cloud продемонстрировала, как этот процесс извлекает данные действий и фоновые элементы из исходных видео для создания реалистичных анимационных клипов. Обновленная модель выглядит более естественно, поскольку помещает анимированного персонажа в его оригинальную среду.
В исследовании, опубликованном на arxiv, говорится: «Мы извлекаем информацию об окружающей среде из [исходных] видео, что позволяет анимированному персонажу сохранять свою оригинальную среду… способствуя бесшовной интеграции персонажа и окружающей среды».
Китайские разработчики быстро продвигаются в области генеративного ИИ
Animate Anyone изначально был выпущен в конце 2023 года, позволяя пользователям создавать видео с персонажами на основе статических изображений.
OpenAI запустила Sora в качестве своей модели преобразования текста в видео после создания ChatGPT в прошлом году. Это нововведение спровоцировало выпуск множества аналогичных моделей преобразования текста в видео крупными китайскими технологическими корпорациями и стартапами. В декабре Sora стала доступна исключительно подписчикам сервисов ChatGPT Plus и Pro.
Китай демонстрирует свое желание догнать мировых лидеров в области ИИ с недавним выпуском Animate Anyone 2. Объявление Alibaba последовало за недавним выпуском ByteDance модели OmniHuman-1, ее мультимодальной модели для преобразования изображений и записанного звука в реалистичный видеоконтент.
Исследование Animate Anyone от Alibaba 2 использовало 100,000-символьные видео
В исследовании Alibaba также отмечается, что платформа Animate Anyone 2 создает взаимодействия между персонажами, сохраняя последовательность движений и «согласованность с окружающей средой».
Для этого исследования исследователи создали базу данных, состоящую из 100 000 видео с персонажами, взятыми из Интернета, с различными сценами и взаимодействиями между людьми и объектами, чтобы оценить производительность Animate Anyone 2 в различных условиях.
Однако Anyone 2 несет риск создания дополнительных дипфейк-видео.
Лян Хайшэн из своей рекламного агентства в Пекине заявляет, что такие ИИ-инструменты «недостаточно хорошо передают человеческие эмоции и детальные выражения лица на видео».
Лян добавил, что базовое визуальное представление в этих ИИ-сгенерированных видео все еще позволяет бизнесу преобразовывать концепции в визуальные материалы для презентаций идей клиентам.
Alibaba объявила о росте квартальной прибыли компании, обусловленном стратегиями в области ИИ. Компания рассматривает крупные инвестиции в ИИ в ближайшие 3 года как возможность, «которая выпадает раз в несколько десятилетий».
Самые умные крипто-энтузиасты уже читают нашу рассылку. Хотите присоединиться? Присоединяйтесь.
Отказ от ответственности. Предоставленная информация не является торговой рекомендацией. Cryptopolitan.com Мы не несем ответственности за любые инвестиции, сделанные на основе информации, представленной на этой странице. Мы настоятельно рекомендуем проводить независимое исследование и/или проконсультироваться с квалифицированным специалистом перед принятием любых инвестиционных решений.
Нур Базми
Нуор Базми работает в новостной команде Cryptopolitan, имея степень по медиаисследованиям. Нуор освещает новости о блокчейне, криптовалютах, искусственном интеллекте, крупных технологических компаниях, рынке электромобилей, глобальной экономике и изменениях в государственной политике. Она изучает маркетинг, чтобы лучше взаимодействовать с международной аудиторией.
