- 엔비디아는 로봇과 자율주행차 훈련을 위한 물리적 AI 개발 가속화를 돕기 위해 코스모스 WFMs(세계 기반 모델)를 출시했습니다.
- WFMs는 실제 세계 시나리오를 비디오로 시뮬레이션하고, 비디오, 텍스트 또는 이미지 입력에 기반하여 맞춤형 결과를 생성합니다.
- 해당 기술 회사는 8월 11일 'Omniverse' 라이브러리 출시를 발표했으며, 이를 통해 개발자들은 '물리적으로 정확한 디지털 트윈'을 구축할 수 있게 되었습니다.
엔비디아는 물리적 AI 개발자들이 비디오 분석 AI 에이전트, 자율주행차(AV), 로봇을 훈련시키기 위해 사용할 세계 모델(world models)을 기반으로 한 코스모스 플랫폼을 공개했습니다. 이 회사는 코스모스 세계 모델이 이미지와 비디오에 구조화된 추론을 사용하여 “인간처럼 물리적 세계를 이해”한다고 주장합니다.
이 기술 회사는 는 이 회사는 개발자들이 기반 모델을 구축하는 것을 돕고 있다고 설명했습니다. 코스모스 플랫폼은 개발자가 범용 사전 훈련된 모델을 특수화된 물리적 AI 모델로 사용자 정의할 수 있게 해준다고 밝혔습니다. 엔비디아는 코스모스가 물리적 세계에 대한 “시공간 이해”를 활용하여 로봇공학 및 자율주행차의 의사결정을 훈련시키는 데이터를 선별한다고 자랑합니다.
이 회사는 또한 코스모스 큐레이터 프레임워크가 개발자들이 방대한 양의 센서 데이터를 필터링, 주석 처리, 중복 제거할 수 있게 한다고 덧붙였습니다. 개발자들은 이 데이터를 사용하여 특정 물리적 AI 요구 사항을 충족하는 맞춤형 데이터셋을 생성합니다. 코스모스 세계 기반 모델은 또한 산업용 비전 시스템 개발을 위한 다운스트림 파이프라인을 위한 데이터를 생성할 수도 있습니다.
코스모스는 예측(Predict), 전달(Transfer), 추론(Reason) 기반 모델을 탑재
엔비디아 팀에 따르면, 코스모스 플랫폼은 개발자가 엄격한 프롬프트 준수를 유지하며 최대 30초의 연속 비디오를 생성할 수 있는 예측(Predict) 예측 모델을 갖추고 있습니다. 이 비디오들은 멀티모달 입력에서 생성됩니다.
전달(Transfer)은 다양한 환경과 조명 조건을 시뮬레이션할 수 있는 멀티컨트롤 모델입니다. 이 기술 회사는 또한 전달이 CARLA와 엔비디아 이삭 시뮬(Isaac Sim) 물리적 AI 시뮬레이션 프레임워크로부터의 3D 입력을 가속화하여 “제어 가능한 데이터 증강”을 가능하게 한다고 밝혔습니다.
엔비디아는 코스모스 Reason이 인간처럼 실제 물리적 세계를 이해하는 완전히 사용자 정의 가능한 VLM(비전 언어 모델)을 사용했다고 밝혔습니다. Reason은 산업 및 도시 공간의 작업을 이해하는 비디오 분석 에이전트를 구동하며, 의사결정에 사용되는 훈련 데이터를 선별합니다.
이 기술 회사는 개발자들이 공장 로봇, 자동화 창고, 고속도로 또는 험지에서의 자율주행차와 같은 산업 및 로봇공학 응용 분야에서 AI 모델 훈련을 위한 데이터를 생성하기 위해 이러한 기반 모델을 활용할 수 있다고 밝혔습니다.
엔비디아는 또한 이러한 기반 모델이 레이블이 지정되지 않은 데이터셋을 사용하여 사용자 입력에 기반한 새로운 데이터를 생성하도록 훈련되었다고 말했습니다. 이 회사는 개발자들이 작은 데이터셋을 사용하여 사전 훈련된 모델을 미세 조정하여 맞춤형 모델을 구축할 수 있는 이러한 일반화 능력을 사용할 수 있다고 덧붙였습니다. 개발자들은 또한 다양한 자율 장치를 훈련시켜 다양한 주변 환경을 감지하고 상호 작용하도록 할 수도 있습니다.
엔비디아, ‘디지털 트윈’ 지원
이 기술 회사는 발표 8월 11일 오미버스 라이브러리 출시. 엔비디아는 이 라이브러리가 RTX PRO 서버와 DGX 클라우드를 기반으로 하여 개발자들이 물리적으로 정확한 디지털 트윈을 구축할 수 있게 한다고 덧붙였습니다. 시뮬레이션에서 실제 세계를 캡처하고 재구성하여 AI 에이전트를 구축하고 물리적 AI 모델을 훈련함으로써 합성 데이터를 생성할 수 있습니다.
엔비디아의 오미버스 및 시뮬레이션 기술 부사장인 레브 레바레디안은 자사가 개발자들이 내일의 로봇과 자율주행차를 구축할 수 있도록 하는 데 전념하고 있다고 말했습니다. 그는 AI와 컴퓨터 그래픽이 로봇공학의 기본 원칙을 변화시키기 위해 수렴하고 있다고 설명했습니다. 레바레디안은 이러한 기술이 “수조 달러 규모의 산업들을 변화시킬 것”이라고 믿습니다.
엔비디아 오미버스 라이브러리와 SDK(소프트웨어 개발 키트)가 이제 개발자들이 로봇 시뮬레이션 및 산업용 AI 애플리케이션을 구축하고 배포할 수 있도록 사용 가능하다고 밝혔습니다. 이 SDK들은 OpenUSD(범용 장면 설명)와 MJCF(MuJoCo) 간 데이터 상호 운용성을 가능하게 하여 로봇이 플랫폼 간에 시뮬레이션될 수 있게 합니다. ‘RTX 레이 트레이싱 3D 가우시안 스플래팅’ 기술 또한 개발자들이 센서 데이터를 사용하여 실제 세계의 물리적 환경을 3차원으로 캡처, 재구성 및 시뮬레이션할 수 있게 합니다.
엔비디아는 Figure AI, Skild AI, 보스턴 다이나믹스, RAI 연구소, 헥사곤, 라이트휠이 오미버스와 이삭 스위트(Sim 및 Lab)를 채택하여 AI 기반 로봇공학 프로젝트를 가속화했다고 주장합니다. 아마존 디바이스 & 서비스 또한 최신 제조 솔루션을 구동하기 위해 이러한 엔비디아 시스템을 사용했습니다.
가장 똑똑한 암호화폐 전문가들이 이미 우리 뉴스레터를 구독하고 있습니다. 참여하고 싶으신가요? 함께하세요.
면책 조항. 제공된 정보는 투자 조언이 아닙니다. Cryptopolitan.com 본 페이지에 제공된 정보를 바탕으로 이루어진 투자에 대해 어떠한 책임도 지지 않습니다. 투자 결정을 내리기 전에 반드시 독립적인 조사나 자격을 갖춘 전문가의 상담을 강력히 권장합니다.
Collins J. Okoth
콜린스 오코트는 암호화폐와 기술을 8 년간 보도해 온 저널리스트이자 시장 분석가입니다. 그는 공인 재무 분석가 (CFA) 자격을 보유하고 있으며 정량 수학 학위를 소지하고 있습니다. 콜린스는 이전에 Geek Computer 와 CoinRabbit 에서 작가 및 편집자로 일했습니다.
