NVIDIA와 함께 AWS에서 자율주행 3.0을 위한 End-to-End Physical AI 데이터 파이프라인 구축하기

0)을 위한 End-to-End Physical AI 데이터 파이프라인의 참조 아키텍처를 소개합니다. 0은 인지, 추론, 행동을 통합하는 E2E Reasoning VLA 시스템으로, 방대한 양의 실제 및 합성 센서 데이터가 필요합니다.

글에서는 차량의 원시 센서 데이터 수집부터 AI 기반 비디오 큐레이션, 신경망 기반 3D 장면 복원, VLA 모델 학습, closed-loop 시뮬레이션 검증까지 전체 과정을 다룹니다. 이를 위해 NVIDIA의 Cosmos와 같은 오픈소스 및 상용 기술을 활용하여 데이터 파이프라인을 구성합니다.

osmos와 같은 오픈소스 및 상용 기술을 활용하여 데이터 파이프라인을 구성합니다.