NVIDIA 연구원들은 엔비디아 에디파이SIGGRAPH의 라이브 데모에서 몇 분 안에 세부적인 3D 사막 풍경을 구축하기 위한 시각적 생성 AI를 위한 멀티모달 아키텍처 실시간 라이브 화요일에 이벤트가 있습니다.
이 행사는 권위 있는 그래픽 컨퍼런스의 최고 세션 중 하나였으며, NVIDIA 연구원들은 AI 에이전트의 지원을 받아 5분 이내에 사막 풍경을 처음부터 구축하고 편집할 수 있는 방법을 보여주었습니다. 라이브 데모에서는 생성 AI가 아이디어를 가속화하고 리포지토리에서 제공되었을 맞춤형 보조 자산을 생성함으로써 아티스트의 조수 역할을 할 수 있는 방법을 강조했습니다.
이러한 AI 기술은 아이디어 창출 시간을 대폭 단축함으로써 3D 아티스트가 더 생산적이고 창의적이 되도록 지원하여 개념을 더 빠르게 탐색하고 워크플로의 일부를 신속히 처리할 수 있는 도구를 제공합니다. 예를 들어, 장면에 필요한 배경 자산이나 360 HDRi 환경을 찾거나 만드는 데 몇 시간을 소비하는 대신 몇 분 만에 생성할 수 있습니다.
3분 만에 아이디어에서 3D 장면까지
완전한 3D 장면을 만드는 것은 복잡하고 시간이 많이 걸리는 작업입니다. 아티스트는 풍부한 장면을 만들기 위해 충분한 배경 객체로 영웅 자산을 지원한 다음 적절한 배경과 조명을 위한 환경 맵을 찾아야 합니다. 시간 제약으로 인해 빠른 결과와 창의적인 탐구 사이에서 균형을 맞춰야 하는 경우가 많았습니다.
AI 에이전트의 지원을 통해 크리에이티브 팀은 두 가지 목표를 모두 달성할 수 있습니다. 컨셉을 빠르게 구현하고 올바른 모습을 얻기 위해 반복 작업을 계속합니다.
실시간 라이브 데모에서 연구자들은 AI 에이전트를 사용하여 NVIDIA Edify 기반 모델에 선인장, 바위, 황소 두개골 등 수십 개의 3D 자산을 생성하도록 지시했으며, 미리보기는 단 몇 초 만에 생성되었습니다.
그런 다음 그들은 에이전트에게 다른 모델을 활용하여 잠재적인 배경과 장면에 물체를 배치하는 방법에 대한 레이아웃을 만들도록 지시했습니다. 또한 에이전트가 바위를 금괴로 재빨리 바꿔서 창의적인 방향의 마지막 순간에 어떻게 적응할 수 있는지 보여주었습니다.
디자인 계획이 수립되면 에이전트에게 전체 품질 자산을 생성하고 장면을 사진처럼 사실적인 이미지로 렌더링하도록 촉구했습니다. NVIDIA Omniverse USD Composer가상 세계를 구축하는 앱입니다.
NVIDIA Edify, 환경 생성 가속화
NVIDIA Edify 모델은 AI 기반 장면 생성 도구를 사용하여 배경 환경과 객체의 생성을 가속화하는 동시에 제작자가 영웅 자산에 집중할 수 있도록 도울 수 있습니다. Real-Time Live 데모는 두 가지 Edify 모델을 선보였습니다.
- 에디파이 3D 텍스트 또는 이미지 프롬프트에서 편집할 준비가 된 3D 메시를 생성합니다. 몇 초 이내에 모델은 각 객체의 회전 애니메이션을 포함한 미리보기를 생성하여 제작자가 특정 디자인을 확정하기 전에 신속하게 프로토타입을 만들 수 있도록 도와줍니다.
- 에디파이 360 HDRi 텍스트나 이미지 프롬프트를 사용하여 최대 16K 자연 풍경의 고동적 범위 이미지(HDRi)를 생성하며, 이를 배경으로 사용하거나 장면에 조명을 비추는 데 사용할 수 있습니다.
데모 동안 연구원들은 또한 대규모 언어 모델로 구동되는 AI 에이전트를 선보였습니다. USD 레이아웃3D 워크플로를 위한 플랫폼인 OpenUSD를 사용하여 장면 레이아웃을 생성하는 AI 모델입니다.
SIGGRAPH에서 NVIDIA는 또한 두 개의 선도적인 창의적 콘텐츠 회사가 생성 AI를 사용하여 디자이너와 아티스트에게 생산성을 높이는 새로운 방법을 제공하고 있다고 발표했습니다. NVIDIA Edify가 제공하는 도구.
Shutterstock은 상용 베타 버전을 출시했습니다. 생성 3D 텍스트나 이미지 프롬프트를 사용하여 제작자가 빠르게 프로토타입을 만들고 3D 자산을 생성할 수 있는 서비스입니다. Edify 기반의 360 HDRi 생성기도 조기 액세스에 들어갔습니다.
Getty Images가 업데이트되었습니다. Getty Images의 생성 AI 최신 버전의 NVIDIA Edify로 서비스를 제공합니다. 사용자는 이제 향상된 출력 품질과 신속한 준수, 고급 제어 및 미세 조정을 통해 두 배 더 빠르게 이미지를 만들 수 있습니다.
NVIDIA Omniverse에서 범용 장면 설명 활용
Edify 모델을 사용하여 생성된 3D 객체, 환경 맵 및 레이아웃은 3D 세계를 설명하고 구성하는 표준 형식인 USD로 구조화됩니다. 이러한 호환성을 통해 아티스트는 Edify 기반 창작물을 Omniverse USD Composer로 즉시 가져올 수 있습니다.
Composer 내에서 인기 있는 디지털 컨텐츠 생성 도구를 사용하여 객체의 위치를 변경하거나, 모양을 수정하거나, 조명을 조정하는 등 장면을 추가로 수정할 수 있습니다.
Real-Time Live는 SIGGRAPH에서 가장 기대되는 이벤트 중 하나로, 생성 AI, 가상 현실, 라이브 퍼포먼스 캡처 기술을 포함한 약 12개의 실시간 애플리케이션을 선보입니다. 아래에서 리플레이를 시청하세요.
