기존 3D 생성 모델의 가장 큰 문제는 두 가지였거든요

Nvidia가 사진 한 장으로 90미터 규모의 3D 환경을 자동 생성하는 Lyra 2.0을 공개했어요.

기존 3D 생성 모델의 가장 큰 문제는 두 가지였거든요. 카메라가 멀어질수록 화면이 왜곡되고, 한 번 지나간 장소로 돌아오면 환경을 처음부터 다시 만들어버리는 거예요. Lyra 2.0은 생성된 모든 프레임의 3D 기하학 정보를 저장해두고, 카메라가 되돌아올 때 이전 공간 정보를 참조해서 이 문제를 해결했어요.

벤치마크에서 GEN3C, Yume-1.5 등 6개 경쟁 모델을 거의 모든 기준에서 앞질렀고, 빠른 버전은 비슷한 품질로 약 13배 빠르게 영상을 생성해요. 생성된 장면은 Isaac Sim 같은 물리 엔진으로 바로 내보낼 수 있어요.

아직 정적인 장면만 지원하지만, 현실 세계 3D 데이터 없이도 로봇 훈련 환경을 통째로 만들 수 있다는 점에서 로보틱스 데이터 문제를 푸는 실마리가 될 수 있어요.