Новый ИИ от Alibaba позволяет анимировать любого персонажа

Генерация контента с помощью технологий ИИ за последний год прошла большой путь. Используя лишь текстовые описания, многие люди смогли создать миллиарды реалистичных и визуально потрясающих изображений с помощью популярных инструментов, таких как DALL-E 2, Midjourney и Stable Diffusion. 

Тем временем новые исследования и достижения привели к появлению инструментов, способных превращать изображения в короткие видео и анимации.

ИИ-генераторы анимации на основе изображений набирают популярность

Исследовательская команда китайского технологического гиганта Alibaba недавно представила модель ИИ, способную создавать «последовательные и контролируемые результаты анимации персонажей» из статических изображений. Модель под названием «Animate Anyone», по сообщениям, способна создавать короткие видео из изображений — по сути, это генератор анимации на основе изображений.

Команда описала Animate Anyone как «фреймворк для анимации персонажей, который может превращать фотографии в видео, управляемые желаемыми последовательностями поз, обеспечивая при этом временную непрерывность». В исследовательской статье разработчики заявили, что модель обучена на внутреннем наборе данных, состоящем из 5 тысяч видеоклипов с персонажами.

Хотя Animate Anyone все еще находится в стадии разработки, он уже был использован для создания ряда впечатляющих анимаций, которые привлекли большое внимание в интернете. В официальном обновлении, опубликованном на Github, команда сообщила о массовом интересе и запросах относительно демо-версии или исходного кода.

«Мы получили множество запросов относительно демо-версии или исходного кода. Мы хотим заверить вас, что мы активно работаем над подготовкой демо-версии и кода для публичного выпуска», — написала команда. «Хотя мы не можем назвать конкретную дату выпуска на данный момент, будьте уверены, что намерение предоставить доступ как к демо-версии, так и к нашему исходному коду является твердым».

Animate Anyone от Alibaba повышает реалистичность результатов

Animate Anyone выделяется среди других инструментов анимации, таких как AnimateDiff и Warpfusion, благодаря своей способности создавать реалистичные и неотличимые результаты. 

Команда утверждает, что Animate Anyone может эффективно поддерживать пространственную и временную согласованность внешнего вида персонажа в видео, анимировать любое изображение персонажа в видео и создавать видео высокого разрешения без проблем — функций, которых не хватает некоторым существующим инструментам. 

Дата выпуска Animate Anyone не указана, но команда уточнила, что цель состоит в том, чтобы «убедиться, что он надежен и удобен для пользователя, переведя его из академического прототипа в более отполированную версию».