[모두의연구소 모두레터] 텍스트 입력 후 60초 만에 3D 모델이 뚝딱!
모두의연구소 공식 뉴스레터 I 모두레터 I 2024년 7월 8일☔️
텍스트 입력 후 60초 만에 3D 모델이 뚝딱!
LLM의 10억 가지 페르소나로 데이터 생성하기
텍스트 입력 후 60초 만에 3D 모델이 뚝딱!
©Meta
메타가 텍스트 프롬프트로 60초 만에 고품질 3D 에셋(assets)을 생성하는 파이프라인 '3D 젠(3D Gen)'을 공개했습니다. 3D 젠의 핵심 기술 '에셋젠(AssetGen)'과 '텍스처젠(TextureGen)'의 논문도 각각 발표했습니다. 3D 젠 파이프라인은 크게 2단계로 이뤄져 있는데요. 첫 번째 단계(AssetGen)에서 3D 메시(mesh)를 생성하고, 두 번째 단계(TextureGen)에서 적절한 텍스처를 입히게 됩니다.
두 단계 모두 디퓨전(Diffusion) 기법이 사용되었는데요. 기존의 3D 생성 모델보다 더 정교하고 프롬프트도 잘 반영된다는 것을 확인할 수 있습니다. 하나의 3D 모델로도 텍스처에 따라서 다양한 사물과 분위기를 표현할 수 있는 것을 보니, 텍스처젠으로 텍스처를 다시 입히는 과정이 핵심적인 아이디어인 것 같네요!
