재구성부터 생성형 AI까지 더 향상된 3D 메시

Reading Time: 2 minutes

차세대 AI 파이프라인은 주어진 이미지와 일치하는 장면을 생성하는 재구성부터 인터랙티브 경험을 위한 에셋을 생성하는 생성형 AI 파이프라인에 이르기까지 고충실도 3D 모델을 생성하는 데 놀라운 성공을 거뒀습니다.

이렇게 생성된 3D 모델은 표준 트라이앵글 메시로 추출되는 경우가 많습니다. 메시 표현은 기존 소프트웨어 패키지 지원, 고급 하드웨어 가속, 물리 시뮬레이션 지원 등 많은 이점을 제공합니다. 그러나 모든 메시가 동일한 것은 아니며 이러한 장점은 고품질 메시에서만 실현됩니다.

최근 NVIDIA의 연구에서는 3D 파이프라인에서 고품질 메시를 생성하여 다양한 애플리케이션의 품질을 개선하는 새로운 접근 방식인 플렉시큐브(FlexiCubes)를 발견했습니다.

플렉시큐브 메시 생성

재구성에서 시뮬레이션에 이르는 AI 파이프라인의 공통 요소는 최적화 프로세스를 통해 메시를 생성한다는 점입니다. 프로세스의 각 단계에서 원하는 출력과 더 잘 일치하도록 표현이 업데이트됩니다.

플렉시큐브 메시 생성의 새로운 아이디어는 생성된 메시를 정밀하게 조정하는 유연하고 추가적인 파라미터를 도입하는 것입니다. 최적화 중에 이러한 파라미터를 업데이트하면 메시 품질이 크게 향상됩니다.

메시 기반 파이프라인에 익숙한 분들은 과거에 행진 큐브를 사용하여 메시를 추출한 경험이 있을 것입니다. FlexiCube는 최적화 기반 AI 파이프라인에서 행진 큐브를 대체하는 드롭인 방식으로 사용할 수 있습니다.

플렉시큐브는 사진 측량 및 생성형 AI와 같은 신경 워크플로우에서 고품질 메시를 생성합니다.

더 나은 메시, 더 나은 AI

플렉시큐브 메시 추출은 최근의 많은 3D 메시 생성 파이프라인의 결과를 개선하여 복잡한 모양의 미세한 디테일을 더 잘 표현하는 고품질의 메시를 생성합니다.

생성된 메쉬는 시뮬레이션을 효율적이고 견고하게 만드는 데 메쉬 품질이 특히 중요한 물리 시뮬레이션에도 적합합니다. 사면체 메쉬는 즉시 물리 시뮬레이션에 사용할 수 있습니다.

지금 플렉시큐브 살펴보기

이 연구는 로스앤젤레스에서 열린 SIGGRAPH 2023에서 NVIDIA 발전의 일환으로 발표되었습니다. 새로운 접근 방식에 대한 자세한 내용은 그라디언트 기반 메시 최적화를 위한 유연한 아이소서피스 추출을 참조하세요. 플렉시큐브(FlexiCubes) 프로젝트 페이지에서 더 많은 결과를 살펴보세요.