Революционная система ИИ учится предсказывать 3D-позы собак по 2D-изображениям

Исследователи из Университета Суррея достигли прорывного достижения в области технологий искусственного интеллекта (ИИ), обучив систему предсказывать трехмерную (3D) позу собак по двумерным (2D) изображениям. Под руководством аспиранта Моир Шутер команда использовала инновационный подход, который открывает двери для разнообразных применений, от экологии до анимации.

В пионерском ходе исследователи обратились к виртуальному миру популярной видеоигры Grand Theft Auto, чтобы создать множество виртуальных собак. Модифицировав игру, они заменили главного персонажа на восемь различных пород собак, создав богатый набор цифрового собачьего поведения. Эта инициатива, получившая название DigiDogs, предоставила богатый набор данных, состоящий из 27 900 кадров, запечатлевающих различные собачьи активности, включая сидение, ходьбу, лай и бег, в различных условиях окружающей среды.

Обучение ИИ на DigiDogs: шаг вперед в предсказательных способностях

Традиционно обучение систем ИИ восприятию 3D-информации из 2D-изображений включает предоставление им знаний о 3D-«истине», обычно достигаемой с помощью костюмов для захвата движения для людей. Однако расширение этого подхода на собак представляло собой уникальную проблему. Не сдаваясь, исследователи использовали набор данных DigiDogs для обучения своей модели ИИ, преодолев отсутствие данных захвата движения для собак.

Г-жа Шутер подчеркнула универсальность их решения, envisioning applications ranging from wildlife conservation to virtual world development. Изначально обученная на CGI-собаках, модель ИИ демонстрирует потенциал экстраполяции 3D-скелетных моделей из фотографий реальных животных. Эта способность обещает различные области, позволяя защитникам дикой природы идентифицировать раненых животных и давая художникам возможность создавать более реалистичных животных в виртуальных средах.

Будущие направления

В будущем исследовательская команда стремится усовершенствовать свою систему ИИ, используя модель DINOv2 от Meta, обеспечивая ее способность точно предсказывать 3D-позы по реальным изображениям собак. Связывая разрыв между виртуальными и реальными данными, они стремятся улучшить производительность модели и расширить ее применимость в различных сценариях. Г-жа Шутер подчеркнула богатство информации, заложенной в 3D-позах, подчеркивая их превосходство над 2D-фотографиями.

Пионерская работа Университета Суррея является примером трансформирующего потенциала технологий ИИ в сочетании с инновационными подходами и междисциплинарным сотрудничеством. По мере развития ИИ, подпитываемого достижениями в области сбора данных и алгоритмического совершенства, возможности для улучшения нашего понимания мира и использования его для практических приложений кажутся безграничными.

Слияние виртуального моделирования, ИИ и реальных данных обещает революционизировать множество областей, от сохранения дикой природы до развлечений. Исследование Университета Суррея представляет собой значительный шаг вперед в раскрытии предсказательных возможностей ИИ, отмечая веху в стремлении использовать технологии для решения сложных задач и раскрытия новых возможностей. При постоянных инновациях и сотрудничестве будущее ИИ обладает огромным потенциалом для лучшего преобразования нашего мира.