"한 장에 0.5초"…스태빌리티AI, 2D를 3D로 만드는 고속 AI모델 공개

스태빌리티AI가 0.5초 만에 2D이미지로 3D에셋으로 전환하고 움직임까지 추가할 수 있는 새로운 인공지능(AI)모델을 공개했다. 단시간에 대규모 3D이미지를 만들 수 있는 만큼 영화, 게임 등 3D에셋을 주로 활용하는 분야에서 쓰일 전망이다. 4일 실리콘앵글 등 외신에 따르면 스태빌리티AI는 스태이블패스트3D(SF3D)라는 새로운 생성형AI 모델을 출시했다. SF3D은 이미지에 재료 매개변수와 반사율을 적용해 UV-언랩핑, 텍스처 처리된 모델을 생성하는 피드포워드 3D에셋 생성모델이다. 대형 재구성 모델(LRM)을 기반으로 1초 이내에 세부적이고 텍스처가 있는 형태를 구성할 수 있는 것이 특징이다. 스태빌리티AI의 이전 모델인 세이블비디오3D는 정지 이미지를 3D 모델 생성을 위한 회전 3D 비디오로 변환하는 데 약 10분이 소모됐다. 이 AI모델은 정점 색상에 의존하지 않고 빠른 텍스처 생성을 가능하게 하는 빠른 UV 언래핑 기술이 적용됐다. 또한 재구성된 모델의 시각적 품질을 향상시키기 위해 재료 매개변수와 노멀 맵도 학습하는 과정을 거쳤다. 이 밖에도 SF3D는 조명 효과를 효과적으로 제거하기 위한 단계를 통합해 다양한 조명환경이 적용된 이미지도 전환할 수 있다. 이 AI모델은 단시간 내에 기존보다 높은 품질의 3D에셋을 빠른 속도로 양산할 수 있는 것이 특징이다. 이러한 특성을 살려 게임과 영화, 가상현실(VR)을 비롯해 건축 및 디자인, 유통분야에서 활용될 전망이다. SF3D의 모델 코드는 깃허브를 통해 사용할 수 있으며, 모델 가중치와 데모 공간은 허깅페이스를 통해 공개됐다. 마크 보스 등 스테이블AI 연구팀은 "SF3D는 3D 재구성 분야에서 속도와 품질에 대한 새로운 기준을 제시한다"며 "전례 없는 속도와 품질은 대기업에서 스타트업까지 3D업무에 도움을 제공할 것"이라고 설명했다.