알리바바는 사실적인 캐릭터 애니메이션을 간소화하기 위한 AI 모델을 업데이트했습니다

알리바바의 클라우드 컴퓨팅 기반 업데이트된 AI 모델인 '애니메이트 애니원 2'는 사용자가 단일 이미지와 비디오를 결합하여 사실적인 캐릭터 애니메이션을 만들 수 있도록 지원합니다.

에 따르면 보도 , 이 시스템은 참조 콘텐츠에서 얻은 환경 정보를 추가함으로써 기존의 동작 신호 기반 방식을 발전시켰습니다.

연구 결과 알리바바 클라우드 통이 연구소의trac사실적인 애니메이션 클립을 생성하는 방법을 보여주었습니다. 업데이트된 모델은 애니메이션 캐릭터를 원래 환경에 배치함으로써 더욱 자연스러운 모습을 구현합니다.

arXiv에 게시된 연구 논문은 "우리는 [원본] 비디오에서 환경 정보를trac하여 애니메이션 캐릭터가 원래 환경을 유지할 수 있도록 함으로써 캐릭터와 환경의 원활한 통합을 가능하게 합니다."라고 명시하고 있습니다

중국 개발자들이 생성형 인공지능 분야에서 빠르게 발전하고 있다

Animate Anyone은 2023년 말에 처음 출시되었으며, 사용자가 정지 이미지를 통해 캐릭터 기반 비디오를 제작할 수 있도록 해줍니다.

OpenAI는 작년에 ChatGPT를 개발한 데 이어 Sora라는 텍스트-비디오 변환 모델을 출시했습니다. 이 혁신은 중국의 주요 기술 기업과 스타트업들이 유사한 텍스트-비디오 변환 모델을 잇따라 출시하는 계기가 되었습니다. 12월부터 Sora는 ChatGPT Plus 및 Pro 멤버십 구독자에게만 제공되기 시작했습니다.

중국은 최근 애니메이트 애니원 2(Animate Anyone 2)를 출시하며 인공지능 분야에서 세계적인 선두 주자들과 어깨를 나란히 하려는 의지를 보여주고 있습니다. 알리바바의 이번 발표는 사진과 녹음된 소리를 실감나는 비디오 콘텐츠로 변환하는 멀티모달 모델인 바이트댄스의 옴니휴먼-1(OmniHuman-1) 출시 이후 나온 것입니다.

알리바바의 Animate Anyone 2 연구에서는 10만자 분량의 동영상을 사용했습니다

알리바바의 연구에 따르면 애니메이트 애니원 2 플랫폼은 일관된 움직임과 "주변 환경과의 조화"를 유지함으로써 캐릭터 간의 상호 작용을 만들어냅니다

본 연구를 위해 연구진은 인터넷에서 수집한 다양한 장면과 인간과 사물 간의 상호 작용을 담은 10만 개의 캐릭터 비디오로 구성된 데이터베이스를 구축하여 다양한 환경에서 Animate Anyone 2의 성능을 평가했습니다.

하지만 Anyone 2는 추가적인 딥페이크 영상을 생성할 위험이 있습니다.

베이징에 있는 광고 대행사의 량하이성 대표는 그러한 AI 도구들이 "영상에서 인간의 감정과 세밀한 얼굴 표정을 전달하는 데에는 부족하다"고 말합니다

량은 이러한 AI 생성 영상의 기본적인 시각적 표현 방식이 여전히 기업들이 고객에게 아이디어를 제안할 때 개념을 시각적으로 표현하는 데 도움이 된다고 덧붙였습니다.

알리바바는 발표했습니다 . 회사는 향후 3년간 AI 분야에 대한 대규모 투자를 "수십 년에 한 번 오는 기회"로 기대하고 있습니다.