본문 바로가기
SDV & 자율주행 SW

우버부터 웨이모까지, 글로벌 로보택시 기업들이 NVIDIA Blackwell과 Thor를 선택한 이유

by JJTech 2026. 9. 23.

of an autonomous robotaxi navigating a complex wet city intersection at dusk, reflections of neon lights on asphalt, 3D sensor projection cones (frustums) and bounding boxes overlaying the scene, high-tech, futuristic but realistic, 16:9 aspect ratio, 8k resolution, photorealistic cinematic lighting, ultra-detailed, no text overlay
-->
메인 썸네일

1. 글로벌 로보택시 생태계를 장악한 NVIDIA의 '3-Computer' 전략

최근 자율주행 업계, 특히 로보택시 씬을 보면 하드웨어와 소프트웨어의 경계가 완전히 무너지고 있다는 느낌을 강하게 받습니다. 단순히 "차량용 칩셋을 잘 만든다"는 수준을 넘어, 개발부터 검증, 그리고 실차 배포에 이르는 전 과정을 하나의 거대한 컴퓨팅 루프로 묶어버리는 플랫폼이 시장을 지배하고 있죠. NVIDIA가 제시한 '3-Computer' 아키텍처가 대표적인 예입니다.

NVIDIA의 발표를 보면, 우버(Uber)를 필두로 메르세데스-벤츠(Mercedes-Benz), 웨이모(Waymo), 주크스(Zoox), 바이디(WeRide) 등 글로벌 로보택시 리더들이 예외 없이 이들의 에코시스템을 채택하고 있습니다. 2035년까지 400억 달러 규모로 성장할 이 시장에서, NVIDIA는 단순한 반도체 공급업체가 아닌 '자율주행의 인프라 그 자체'가 되려는 야망을 노골적으로 드러내고 있네요.

🎬 [01:59] NVIDIA DRIVE AGX Thor 기반 차세대 자율주행 플랫폼 실증
(설명: 블랙웰 아키텍처 기반의 강력한 컴퓨팅 파워를 통해 복잡한 도심 환경에서 실시간 360도 센서 퓨전과 VLA 추론을 수행하는 장면입니다)

NVIDIA가 말하는 3-Computer 전략의 핵심은 매우 명확합니다.

  1. 학습(Training): NVIDIA DGX와 새로운 open VLA(Vision-Language-Action) 모델 제품군인 NVIDIA Alpamayo를 통한 인공지능 모델 학습.
  2. 시뮬레이션 및 검증(Simulation & Validation): Omniverse NuRec과 NVIDIA Cosmos 월드 파운데이션 모델을 활용한 가상 환경 검증.
  3. 차량 탑재형 컴퓨터(In-Vehicle Compute): Blackwell 아키텍처 기반의 DRIVE AGX Thor와 Hyperion 10 레퍼런스 아키텍처를 통한 실시간 추론 및 제어.

이 세 가지 축이 어떻게 유기적으로 맞물려 실제 양산형 자율주행 시스템의 완성도를 끌어올리는지, 엔지니어의 관점에서 조금 더 딥다이브해 보겠습니다.

2. VLA 모델과 인-카 컴퓨팅: 현업 엔지니어가 보는 기술적 핵심

메타 액션(Meta Action)과 생각의 사슬(Chain-of-Thought)이 만드는 차이

자율주행을 개발할 때 우리를 가장 괴롭히는 것은 예측 불가능한 '롱테일(Long-tail) 시나리오'입니다. 도로 위에 갑자기 나타난 기괴한 형태의 장애물이나, 공사 현장에서 수신호를 보내는 인부의 모호한 동작 같은 것들이죠.

NVIDIA가 이번에 강조한 NVIDIA Alpamayo VLA 모델은 이 문제를 '추론'의 영역으로 해결하려 합니다. 단순히 센서 데이터를 입력받아 조향각과 가속도를 출력하는 기존의 End-to-End 방식과 달리, 상황을 쪼개어 분석하고 판단 근거를 단계별로 도출하는 '생각의 사슬(Chain-of-Thought)' 방식을 도입한 것인데요.

실제 평가 데이터를 보면, 이 메타 액션과 추론 데이터를 학습에 추가했을 때 궤적 예측 오차(Average Displacement Error)가 2.08m에서 1.18m로 무려 43%나 감소했다고 합니다. 이 수치는 실무적으로 엄청난 의미를 가집니다. 차선 하나 너비가 보통 3m 내외인 점을 감안하면, 오차가 1m 이하로 줄어든다는 것은 가상 제어기가 차선을 이탈하거나 인접 차량과 충돌할 확률을 극적으로 낮췄다는 뜻이니까요.

NVIDIA Cosmos와 월드 파운데이션 모델의 파괴력

실도로 주행만으로는 롱테일 시나리오를 다 채울 수 없습니다. 그래서 시뮬레이션이 중요한데, 기존의 시뮬레이터는 그래픽 아티스트들이 가상 환경을 일일이 모델링해야 해서 비용과 시간의 한계가 명확했습니다.

NVIDIA Cosmos는 센서 데이터를 바탕으로 물리 법칙이 적용된 현실적인 변형 시나리오를 스스로 '생성'해 냅니다. 비가 쏟아지는 밤거리에 갑자기 뛰어드는 보행자, 역주행하는 킥보드 같은 극단적인 코너 케이스를 수천, 수만 가지 버전으로 자동 생성하여 모델을 테스트하는 것이죠.

이 데이터 파이프라인이 어떻게 선순환 구조를 그리는지 아래 흐름도를 통해 살펴보겠습니다.

flowchart TD
    A["① 실도로 롱테일 데이터 수집<br/>(Fleet Data)"] --> B["② Omniverse NuRec 기반<br/>실제 시나리오 재구성"]
    B --> C["③ Cosmos 월드 모델 활용<br/>수만 가지 변형 시나리오 생성"]
    C --> D["④ AlpaSim 가상 환경에서<br/>VLA 모델 Closed-loop 검증"]
    D --> E["⑤ 검증 완료된 모델을<br/>DRIVE AGX Thor에 배포"]
    E --> A

    classDef default fill:#f8faff,stroke:#0066cc,stroke-width:1.5px,color:#222,font-size:13px;

이러한 폐루프(Closed-loop) 검증 아키텍처가 구축되어야만, 비로소 OTA(Over-The-Air)를 통해 매주 고도화된 소프트웨어를 차량에 안전하게 배포할 수 있는 진정한 SDV(소프트웨어 정의 차량)가 완성됩니다.

3. 기존 방식 대비 비교 분석 및 실무 고려사항

그렇다면 우리가 기존에 사용하던 딥러닝 기반 End-to-End 모델이나 규칙 기반(Rule-based) 제어 아키텍처와 비교했을 때, NVIDIA의 새로운 풀스택은 어떤 강점과 현실적인 한계를 가지고 있을까요?

비교 항목 규칙 기반 시스템 (전통적 방식) 일반 End-to-End DL 모델 NVIDIA VLA (Alpamayo) 기반 풀스택
롱테일 대응력 매우 낮음 (예외 규칙을 일일이 하드코딩해야 함) 보통 (학습 데이터 외 상황에서 블랙박스 문제 발생) 매우 높음 (상황 추론 및 메타 액션 판단 가능)
설명 가능성 (Explainability) 완벽함 (코드를 보면 판단 근거 확인 가능) 불가능에 가깝음 (신경망 내부를 알 수 없음) 우수함 (Chain-of-Thought를 통한 판단 단계 시각화)
요구 컴퓨팅 파워 매우 낮음 (가벼운 MCU 수준에서도 구동 가능) 보통 (일반적인 차량용 SoC 수준) 극도로 높음 (Dual DRIVE AGX Thor 등 하이엔드 SoC 필수)
안전성 인증 (Safety) 용이함 (ISO 26262 준수 및 정적 검증 가능) 매우 어려움 (결과값의 안전성 보증 불가) 보통 (NVIDIA Halos OS 및 클라우드-차량 연계 검증 필요)

실무 엔지니어로서 고민해봐야 할 지점들

이 아키텍처가 장점만 있는 것은 아닙니다. 실제 양산 프로젝트를 진행하는 엔지니어 입장에서는 몇 가지 뼈아픈 현실적 제약이 눈에 밟힙니다.

첫째는 전력 소비와 열관리(Thermal Management)입니다. Blackwell 아키텍처를 기반으로 한 Dual DRIVE AGX Thor는 엄청난 연산 속도(TFLOPS)를 자랑하지만, 그만큼 전력 소모량도 상당합니다. 배터리 효율이 극도로 중요한 전기차(EV) 기반 로보택시 플랫폼에서, 자율주행 컴퓨터가 소모하는 전력을 어떻게 최적화하고 수냉식 쿨링 시스템을 어떻게 컴팩트하게 설계할 것인가는 패키징 엔지니어들의 거대한 숙제입니다.

둘째는 실시간성(Real-time latency) 보장입니다. VLA 같은 대형 멀티모달 모델은 추론 속도가 상대적으로 느립니다. 시속 100km로 달리는 고속도로에서 10ms의 지연 시간은 차량이 약 28cm를 더 나아간다는 뜻입니다. 제어 명령의 데드라인을 맞추기 위해, 초고성능 인공지능 모델의 크기를 엣지 디바이스에 맞게 경량화(Distillation)하면서도 추론 정확도를 잃지 않는 고도의 모델 압축 기술이 필수적으로 수반되어야 합니다.

4. 마치며

NVIDIA가 이번에 공개한 로보택시 기술 생태계는 단순히 "우리가 더 빠른 칩을 만들었다"는 선언이 아닙니다. 자율주행의 고도화를 가로막던 최대 난제인 '롱테일 시나리오'를 대규모 물리 AI 데이터 생성(Cosmos)추론형 인공지능(Alpamayo), 그리고 이를 차 안에서 실시간으로 돌릴 수 있는 블랙웰 기반 하드웨어(DRIVE AGX Thor)의 삼각편대로 정면 돌파하겠다는 의지입니다.

현업에서 자율주행 아키텍처를 고민하는 엔지니어로서, 이제는 단순히 자체 알고리즘을 튜닝하는 데 머물러서는 안 된다는 위기감이 듭니다. NVIDIA가 깔아놓은 이 강력한 인프라와 툴체인을 우리 시스템에 어떻게 영리하게 이식하고, 그 위에서 우리만의 독점적인 도메인 지식(Domain Knowledge)을 어떻게 차별화 포인트로 녹여낼 것인가가 앞으로의 생존을 결정짓는 핵심 열쇠가 될 것입니다.


참고 자료 및 공식 영상 (References)