[오늘의 AI] 엔비디아 '코스모스 3 엣지' 공개, 피지컬 AI 시대가 더 가까워진다

엔비디아(NVIDIA)가 로봇, 자율주행차, 스마트 인프라 등 엣지 환경에서 실시간 피지컬 AI(Physical AI)를 구현하기 위한 월드 파운데이션 모델 '코스모스 3 엣지(Cosmos 3 Edge)'를 전격 공개했다.

그동안 고성능 AI 추론은 대규모 클라우드 데이터센터에 의존하는 경우가 많았다. 하지만 이번 모델의 등장으로 클라우드를 거치지 않고 현장의 로컬 GPU 환경에서도 물리적 세계를 이해하고 추론하는 프론티어급 AI를 직접 구현할 수 있게 됐다. 이에 따라 산업 현장 전반에서 피지컬 AI의 상용화 경쟁이 한층 가속화될 전망이다.

 

'월드 모델'이란 무엇인가?

최근 로봇공학과 자율주행 분야에서는 단순 생성을 넘어 actual 물리 환경을 이해하고 미래 상황을 예측하는 '월드 모델(World Model)'이 핵심 기술로 떠오르고 있다. 월드 모델은 단순히 시각 이미지를 인식하는 수준을 넘어서서, 주변 상황을 종합적으로 파악하고 향후 발생할 변화를 예측하여 적절한 행동 결정을 내리는 AI 시스템이다.

기존에는 이러한 고성능 월드 모델을 구동하려면 대규모 데이터센터가 필수적이었고, 엣지용 경량 모델은 성능 면에서 한계가 뚜렷했다. 엔비디아는 성능과 효율성 사이의 한계를 극복하기 위해 코스모스 3 엣지를 설계했다.

 

40억 파라미터 기반의 멀티모달 '옴니모델'

코스모스 3 엣지는 40억 개(4B)의 파라미터를 갖춘 소형 월드 파운데이션 모델이다. 메모리 효율성과 높은 데이터 처리량을 동시에 달성하여 제한된 엣지 하드웨어에서도 원활하게 작동한다.

• 통합 데이터 이해: 텍스트, 이미지, 영상, 주변 소리, 행동(Action) 데이터를 하나의 모델에서 통합 처리하고 생성하는 '옴니모델(Omni Model)' 구조를 적용했다.
• 혁신적 아키텍처: 트랜스포머 혼합(Mix-of-Transformers) 아키텍처를 바탕으로 실시간 비전 분석과 로봇 행동 제어에 필요한 최적의 성능을 제공한다.
• 유연한 하드웨어 지원: 엔비디아 젯슨(Jetson), RTX PRO, DGX 시스템, 지포스 RTX GPU 등 다양한 단말 및 엣지 플랫폼에 손쉽게 배포할 수 있다.

 

산업 현장 적용 분야: 로봇부터 자율주행, 스마트 인프라까지

 

로보틱스 (Robotics) 개발자는 엔비디아 DGX 스테이션에서 수집한 로봇 데이터를 바탕으로 모델을 사후 학습(Post-Training)시킨 뒤, 특정 작업에 특화된 '월드 액션 모델'을 구축할 수 있다. 구축된 모델을 차세대 로봇용 AI 컴퓨터인 '젯슨 토르(Jetson Thor)'에 배포하면, 로봇의 이동, 물체 조작 및 인식, 실시간 작업 수행 등 정밀한 제어가 가능해진다. 현재 두산로보틱스, 애자일 로봇(Agile Robots), 지멘스(Siemens), 스킬드 AI(Skild AI) 등이 자사 개발 워크플로우 도입을 검토 중이다.

 

자율주행 (Autonomous Driving) 제한된 차량용 하드웨어 환경에서도 복잡한 도로 상황을 실시간으로 파악한다. 교통 흐름 분석은 물론 보행자와 주변 차량의 움직임을 미리 예측하여 안전한 주행 정책을 수립한다. 엔비디아의 차량용 모델인 '알파마요(Alpamayo)'와 연계해 정책 모델 증류(Distillation)의 기반으로도 활용된다.

 

스마트 인프라 (Smart Infrastructure) 교통 관제, 공공 안전, 물류센터 자동화, 산업 현장 검사 등에서 실시간 영상 스트리밍을 분석하는 '비전 에이전트(Vision Agent)' 역할을 수행한다. 센티픽(Centific), 바이디오(Vaidio), 위안(YUAN) 등이 도입을 검토하고 있다.

 

차등화된 라인업과 오픈 생태계 제공

엔비디아는 이번에 코스모스 3 엣지(4B)와 함께 코스모스 3 나노(16B), 코스모스 3 슈퍼(64B) 모델을 동시에 공개했다.

개발자는 온디바이스에 직접 탑재되는 경량 모델부터 고충실도 시뮬레이션 및 데이터 생성을 위한 대규모 모델까지 프로젝트의 규모와 목적에 맞춰 자유롭게 선택할 수 있다. 아울러 엔비디아는 개발자 접근성을 높이기 위해 해당 모델들을 허깅페이스(Hugging Face)와 깃허브(GitHub)를 통해 오픈소스 프레임워크 및 학습 레시피와 함께 배포했다.

 

정리하며

휴머노이드 로봇, 산업용 자율주행, 스마트 팩토리 시장이 가파르게 성장함에 따라 AI가 실제 물리 세계를 직관적으로 이해하고 스스로 행동하는 능력이 필수가 되었다. 엔비디아의 '코스모스 3 엣지'는 온디바이스 환경에서도 지능형 제어를 실현할 수 있게 해줌으로써, 차세대 피지컬 AI 시대를 이끄는 핵심 동력이 될 것으로 기대된다.