엔비디아, 피지컬 AI 겨냥 ‘코스모스 3’ 공개…로봇·자율주행 개발 가속

[녹색경제신문 = 김지윤 기자] 엔비디아가 피지컬 AI 개발을 겨냥한 차세대 오픈 월드 파운데이션 모델을 공개했다. 로봇과 자율주행차, 비전 AI가 실제 물리 세계를 인식·예측하고 행동할 수 있도록 지원하는 모델로, 피지컬 AI 개발 경쟁이 본격화되는 가운데 관련 생태계 확장에 속도가 붙을 전망이다.

엔비디아는 아시아 최대 ICT 전시회 컴퓨텍스(COMPUTEX) 2026 기간 중 열린 ‘엔비디아 GTC 타이베이’에서 피지컬 AI용 오픈 월드 파운데이션 모델 ‘엔비디아 코스모스 3(Cosmos 3)’를 출시했다고 1일 밝혔다.

코스모스 3는 비전 추론, 월드 생성, 액션 예측을 하나의 시스템에 결합한 모델이다. 엔비디아는 이를 위해 ‘트랜스포머 혼합’ 아키텍처를 적용했다. 추론 트랜스포머와 생성 트랜스포머를 함께 활용해 객체 간 상호작용과 동작, 시공간 관계를 이해하고, 이를 바탕으로 비디오와 액션 궤적을 생성할 수 있도록 설계했다.

엔비디아는 코스모스 3을 세계 최초의 완전한 오픈소스 형태의 옴니모델이라고 설명했다. 텍스트, 이미지, 비디오, 음성, 액션 궤적 등 수십억 개 샘플을 포함한 대규모 멀티모달 피지컬 AI 데이터셋으로 훈련돼, 개발자가 비교적 적은 데이터와 낮은 비용으로 로봇·자율주행 AI 시스템을 구축할 수 있도록 지원한다.

젠슨 황 엔비디아 창립자 겸 최고경영자(CEO)는 “멀티모달 추론 언어, 비전과 월드 모델의 발전으로 피지컬 AI의 빅뱅이 곧 도래할 것”이라며 “코스모스 3은 개발자들이 물리적 세계를 인식하고 추론하며 계획하고 행동하는 로봇, 자율주행차, 비전 AI를 개발할 수 있도록 하는 도약을 제공한다”고 말했다.

엔비디아는 코스모스 3 공개와 함께 글로벌 협력체인 ‘엔비디아 코스모스 연합’도 출범했다. 코스모스 연합은 월드 모델 빌더, AI 개발자, 피지컬 AI 기업이 함께 오픈 월드 모델을 고도화하기 위한 협력체다. 창립 회원사에는 애자일 로봇, 블랙 포레스트 랩스, 제너럴리스트, LTX, 런웨이, 스킬드 AI 등이 포함됐다.

산업계 활용도 확대되고 있다. 엔비디아는 로보틱스 분야에서는 애자일 로봇, 두산로보틱스, LG전자, 삼성, 스킬드 AI 등이 코스모스 플랫폼을 활용하고 있다고 밝혔다.

자율주행차 분야에서는 리오토가 참여하고 있으며, 비전 AI 에이전트 분야에서는 센티픽, 포그스피어, 링커 비전, 마일스톤 시스템즈, 유안 등이 코스모스를 기반으로 산업 AI와 스마트 공간 애플리케이션을 개발하고 있다는 설명이다.