AI는 콘텐츠가 제작, 배포, 소비되는 방식을 개선하여 방송 산업을 혁신하고 있지만, 이 기술을 통합하는 것은 어려울 수 있습니다.
이번 주에 한정된 수량으로 출시되었습니다. 미디어용 NVIDIA Holoscan 개발자가 AI를 라이브 미디어 애플리케이션에 쉽게 통합하고 미디어 회사가 AI와 동일한 인프라에서 라이브 미디어 파이프라인을 실행할 수 있도록 돕는 소프트웨어 정의, AI 기반 플랫폼입니다.
실시간 그래픽 처리 및 AI 컴퓨팅을 위한 NVIDIA GPU 기반 NVIDIA RTX AI 워크스테이션과 PC는 이러한 애플리케이션을 개발하기 위한 이상적인 기반을 제공합니다.
암스테르담에서 열리는 IBC 방송 및 미디어 기술 쇼에서 Adobe, Blackmagic Design, Topaz Labs를 비롯한 NVIDIA 파트너는 라이브 미디어 발전을 뒷받침하는 최신 RTX AI 기반 비디오 편집 도구와 기술을 선보일 예정입니다.
미디어용 NVIDIA Holoscan: 라이브 프로덕션의 미래 구축
라이브 미디어에서 애플리케이션을 개발하기 위한 강력한 AI 소프트웨어 스택을 구축하는 것은 상당한 전문 지식과 리소스가 필요한 복잡한 과정입니다.
이러한 기술적 복잡성은 대량의 고품질 데이터에 대한 필요성과 파일럿 프로그램을 프로덕션 수준의 성능으로 확장하는 어려움과 결합되어 종종 이러한 이니셔티브가 완전히 배포되는 것을 방해합니다. 또한, 소프트웨어의 기존 개발은 전용 하드웨어에 묶여 있어 혁신을 더욱 제한하고 업그레이드를 번거롭게 만듭니다.
이러한 과제를 해결하기 위해 미디어용 NVIDIA Holoscan NVIDIA의 광범위한 AI 소프트웨어 개발 키트(SDK)와의 원활한 통합을 통해 개발자가 라이브 미디어를 위한 최첨단 AI 애플리케이션을 손쉽게 만들 수 있도록 지원합니다. 이를 통해 개발자는 고급 AI 기능을 애플리케이션에 쉽게 통합하여 더욱 정교하고 지능적인 미디어 애플리케이션을 만드는 데 집중할 수 있습니다. 그런 다음 미디어 회사는 해당 애플리케이션을 플랫폼 위에서 실행되는 라이브 비디오 파이프라인에 원활하게 연결할 수 있습니다.
라이브 미디어 애플리케이션 개발의 또 다른 전형적인 과제는 배포의 비효율성입니다. 개발자는 종종 온프레미스, 클라우드 또는 에지에서 다양한 배포 유형에 대해 별도의 빌드를 만들어야 합니다. 이는 비용을 증가시키고 개발 일정을 연장할 수 있습니다. 개발자는 또한 인증 및 타이밍 프로토콜과 같은 추가 인프라 서비스를 구축하기 위해 리소스를 할당해야 하며, 이는 예산을 더욱 압박합니다.
Holoscan for Media의 클라우드 네이티브 아키텍처는 애플리케이션을 어디서나 실행할 수 있도록 합니다. 클라우드, 엣지 또는 온프레미스 배포를 위해 개발된 애플리케이션은 여러 환경에서 실행될 수 있으므로 별도의 빌드가 필요하지 않습니다.
Holoscan for Media는 오늘 온프레미스에서 사용할 수 있으며, 클라우드 및 엣지 배포는 곧 제공됩니다. 이 플랫폼에는 라이브 방송에서 오디오-비디오 동기화를 위한 Precision Time Protocol과 애플리케이션 간의 원활한 통신을 위한 Networked Media Open Specifications도 포함되어 있어 복잡한 시스템의 관리를 간소화합니다.
RTX AI PC 및 워크스테이션으로 개발 강화
NVIDIA RTX AI PC와 워크스테이션은 몰입형 미디어 경험을 개발하기 위한 견고한 기반을 제공함으로써 Holoscan for Media의 잠재력을 보완합니다.
RTX AI PC와 워크스테이션에서 사용할 수 있는 CUDA 에코시스템은 미디어 및 AI 워크로드에 최적화된 광범위한 NVIDIA SDK 및 도구에 대한 액세스를 제공합니다. 이를 통해 개발자는 워크스테이션에서 배포 환경으로 원활하게 전환할 수 있는 애플리케이션을 빌드하여 제작물이 견고하고 확장 가능한지 확인할 수 있습니다.
엔비디아 AI 엔터프라이즈 AI 애플리케이션을 위한 안전하고 안정적이며 확장 가능한 프로덕션 환경이 필요한 기업 개발자에게 NVIDIA GPU에 최적화된 포괄적인 AI 소프트웨어, 도구 및 프레임워크를 제공하여 추가적인 향상을 제공합니다. 이 엔터프라이즈급 AI 플랫폼에는 간소화된 배포를 위한 TensorFlow, PyTorch 및 RAPIDS와 같은 인기 있는 프레임워크가 포함되어 있습니다.
NVIDIA AI Enterprise를 사용하면 개발자는 컴퓨터 비전, 자연어 처리 및 추천 시스템과 같은 고급 AI 기능을 미디어 애플리케이션에 직접 구축할 수 있습니다. 또한 미디어 워크플로 내에서 정교한 AI 모델을 프로토타입화, 테스트 및 배포할 수 있습니다.
비디오 편집자와 매니아 여러분, 기뻐하세요!
미디어용 Holoscan이 전시됩니다. 아이비씨(주)9월 13-16일 진행. Dell Technologies 부스 7.A45에서 참석자는 애플리케이션 개발에서 라이브 배포로 원활하게 전환하는 방법을 보여주는 라이브 데모를 볼 수 있습니다.
여러 NVIDIA 파트너사가 이번 행사에서 최신 RTX AI 기반 비디오 편집 도구와 기술을 선보일 예정입니다.
Blackmagic Design의 다빈치 리졸브 19 Studio가 출시되어 편집 워크플로를 간소화하는 AI 기능이 도입되었습니다.
- IntelliTrack AI는 편집 과정에서 영상을 빠르고 쉽게 안정화할 수 있게 해줍니다. DaVinci Resolve의 Fairlight 도구에서 화면상의 피사체를 추적하고 2D 및 3D 공간을 이동할 때 자동으로 오디오 패닝을 생성하는 데 사용할 수 있습니다. AI 기반 기능을 사용하면 편집자는 스테레오 필드에서 오디오를 빠르게 패닝하거나 이동하여 믹스 환경에서 여러 배우의 음성 위치를 제어할 수 있습니다.
- UltraNR은 DaVinci Resolve의 공간적 노이즈 감소 팔레트에 있는 AI 가속 노이즈 제거 모드입니다. 편집자는 이를 사용하여 이미지 선명도를 유지하면서 프레임에서 디지털 노이즈(세부 사항을 가리는 원치 않는 색상 또는 휘도 변동)를 극적으로 줄일 수 있습니다. 편집자는 또한 이 도구를 시간적 노이즈 감소와 결합하여 변동이 더 눈에 띄는 움직임이 있는 이미지에서 더욱 효과적인 노이즈 제거를 할 수 있습니다.
- RTX 비디오 슈퍼 레졸루션은 AI를 사용하여 저해상도 비디오를 선명하게 합니다. 압축 아티팩트를 감지하고 제거하여 품질이 낮은 비디오를 크게 향상시킵니다.
- RTX Video HDR은 AI 강화 알고리즘을 사용하여 표준 동적 범위 비디오를 생생한 HDR10 색상 공간으로 리매핑합니다. 이를 통해 비디오 편집자는 HDR로 녹화할 수 있는 카메라가 없더라도 높은 동적 범위 콘텐츠를 만들 수 있습니다.
IntelliTrack과 UltraNR은 NVIDIA RTX PC와 워크스테이션에서 실행할 경우 성능이 향상됩니다. 엔비디아 텐서RT Macbook Pro M3 Max보다 GeForce GTX 4090 노트북에서 최대 3배 더 빠르게 실행됩니다.
모든 DaVinci Resolve AI 효과는 TensorRT에 의해 RTX GPU에서 가속화됩니다. Resolve 업데이트에는 Beauty, Edge Detect 및 Watercolor 효과에 대한 GPU 가속화가 포함되어 NVIDIA GPU에서 성능이 두 배로 향상됩니다.
이 업데이트에는 HEVC 인코딩 효율성을 10% 높이는 NVENC를 활용하는 NVIDIA의 H.265 초고화질(UHQ) 모드도 도입됩니다.
픽셀 완벽 파트너: Topaz Video AI와 Adobe After Effects
올해, 토파즈 연구소 소개했다 어도비 애프터 이펙트 플러그인 비디오 AI비디오 업스케일링 및 프레임 보간을 위한 선도적인 솔루션입니다. 이 플러그인은 전체 범위의 향상 및 프레임 보간 모델을 업계 표준 모션 그래픽 소프트웨어에 직접 통합합니다.
또한 사용자는 After Effects 합성에서 AI 업스케일링 도구에 액세스할 수 있어 서로 다른 도구 간에 대용량 파일을 전송할 필요 없이 더 큰 유연성과 빠른 합성 속도가 제공됩니다.
Topaz Video AI의 뛰어난 기능 중 하나는 Topaz의 Apollo AI 모델을 이용해 극적인 슬로우 모션 영상을 제작하는 기능으로, 영상을 최대 16배 느린 모션으로 변환할 수 있습니다.
이 플러그인은 업스케일링에도 뛰어나며, 품질을 떨어뜨리지 않고 저해상도 자산을 대규모 프로젝트에 통합하는 데 이상적입니다. 여기에는 4배 업스케일링을 위한 Rhea 모델과 같은 Topaz의 모든 향상 모델이 포함되어 있습니다. 확인해 보세요 어도비 블로그 After Effects 플러그인과 사용 방법에 대해 자세히 알아보세요.
속도를 위해 제작된 이 플러그인은 NVIDIA TensorRT에 의해 RTX GPU에서 가속화되어 AI 성능을 최대 70%까지 향상시킵니다. Video AI에 대한 향후 업데이트에서는 앱 설치의 일부로 필요한 AI 모델 파일 수를 크게 줄이는 것을 포함하여 TensorRT 성능 개선 및 효율성 최적화가 추가로 도입됩니다.
AI의 급속한 통합으로 방송의 미래는 그 어느 때보다 밝고 혁신적입니다.
