엔비디아가 미국 샌프란시스코에서 열리는 게임 개발자 콘퍼런스(Game Developers Conference, GDC)에서 RTX GPU와 DGX 스파크(DGX Spark) 데스크톱 슈퍼컴퓨터를 기반으로 AI 비디오 생성 워크플로우를 간소화하는 다양한 업데이트를 발표했다.

게임 개발자와 아티스트들은 엔비디아(NVIDIA) RTX AI PC에서 영화 같은 세계관과 인상적인 캐릭터를 창조하며, 한층 더 몰입감 있는 경험을 만들어내고 있다.

엔비디아는 이번 GDC에서 다음과 같은 내용을 발표했다.

- 신규 컴피UI(ComfyUI) 앱 뷰(App View): 간소화된 인터페이스로 인기 생성형 AI 도구의 진입 장벽을 낮췄다.

- 컴피UI에서 사용 가능한 RTX 비디오 슈퍼 레졸루션(RTX Video Super Resolution): 실시간 4K 업스케일러로 비디오 생성에 최적화됐으며, 개발자에게는 파이썬 휠(Python Wheel) 형태로 제공된다.

- 현재 NVFP4·FP8 모델 버전은 플럭스.2 클라인(FLUX.2 Klein)을 지원하며, LTX-2.3에 대한 NVFP4 지원도 곧 제공될 예정이다. 이를 통해 두 모델 모두 최대 2.5배 성능 향상과 최대 60% 메모리 사용량 절감이 가능하다.

이러한 도구들은 콘셉트 탐색, 스토리보드 제작, 장면 기획 등 초기 창작 워크플로우를 지원하는 동시에, RTX AI PC에서 비디오 모델을 실험하려는 초보 사용자들의 진입 장벽을 낮춘다.

마찰 없는 로컬 AI: 협업, 최적화, 맞춤화

오늘날 인기 AI 애플리케이션은 초보자도 최신 모델을 노트북이나 데스크톱에서 쉽게 사용할 수 있다.

컴피UI의 새로운 앱 뷰는 노드 그래프(node graph)에 익숙하지 않은 아티스트를 위해 워크플로우를 단순한 인터페이스로 제시한다. 사용자는 프롬프트를 입력하고 간단한 파라미터를 조정한 뒤 생성 버튼을 누르기만 하면 된다. 기존의 전체 노드 기반 인터페이스는 ‘노드 뷰(Node View)’로 계속 제공되며, 사용자는 두 모드를 자유롭게 오갈 수 있다.

앱 뷰는 컴피UI의 RTX 최적화 기능과도 호환된다. RTX GPU에서의 성능은 지난해 9월 이후 40% 향상됐으며, 컴피UI는 이제 NVFP4·FP8 데이터 포맷을 기본적으로 지원한다. 이를 종합하면 지포스(GeForce) RTX 50 시리즈 GPU의 NVFP4 포맷을 사용할 경우 성능은 최대 2.5배 향상되고 VRAM 사용량은 최대 60% 감소한다. FP8 포맷을 사용할 때는 성능이 최대 1.7배 향상되고 VRAM 사용량은 최대 40% 감소한다.

엔비디아는 지난 1월 CES에서 NVFP4와 FP8을 지원하는 여러 모델을 발표했으며, 이제 더 많은 NVFP4·FP8 모델이 컴피UI에서 제공된다. 여기에는 곧 NVFP4가 지원될 LTX-2.3을 비롯해 플럭스.2 클라인 4B와 플럭스.2 클라인 9B가 포함된다. 사용을 시작하려면 허깅페이스(Hugging Face)에서 NVFP4와 FP8 체크포인트를 다운로드한 후, 컴피UI의 템플릿 브라우저(Template Browser)를 통해 기본 워크플로우를 불러오고 기본 모델 체크포인트를 새로 다운로드한 체크포인트로 교체하면 된다.

앱 뷰 모드는 현재 사용 가능하며, 자세한 내용은 컴피UI에서 확인할 수 있다.

더 빠른 4K 비디오 생성

고품질 비디오 결과물을 얻기 위해서는 속도, VRAM, 제어라는 세 가지 제약을 동시에 고려해야 한다. 많은 아티스트들이 4K 품질을 원하지만, 대부분은 먼저 낮은 해상도로 빠르게 프리뷰를 생성한 뒤 이를 업스케일링하는 방식을 선호한다. 기존 업스케일러의 경우, 10초 분량의 비디오를 4K 해상도로 업스케일링하는 데 몇 분이 걸리기도 한다.

이제 사용자는 엔비디아 RTX 비디오 슈퍼 레졸루션을 활용해 생성된 비디오를 빠르게 4K로 업스케일링할 수 있다. 해당 기능은 컴피UI에서 노드 형태로 제공되며, RTX 비디오는 독립형 노드로도 사용할 수 있어 사용자가 처음부터 비디오 생성 워크플로우를 직접 구축할 수 있다.

엔비디아는 PyPI 리포지토리를 통해 AI 개발자를 위한 무료 파이썬 패키지를 공개했으며, 깃허브(GitHub) 샘플 코드와 VFX 파이썬 바인딩 가이드도 함께 제공하고 있다. 이 패키지는 RTX GPU의 텐서 코어(Tensor Core)에서 직접 실행되며, RTX 비디오를 구동하는 동일한 AI 업스케일링 기술에 프로그래밍 방식으로 접근할 수 있도록 지원한다. 이를 통해 일반적인 로컬 업스케일러 대비 최대 30배 빠른 4K 업스케일링을 제공하면서 VRAM 사용량도 크게 줄인다. 이 패키지는 엔비디아 비디오 이펙트(Video Effects) 소프트웨어 개발 키트를 기반으로 한다.

엔비디아 RTX 5090 GPU에서 실행한 LTX-2와 플럭스.2 클라인 9B 생성형 AI 모델 성능 비교. 성능 테스트는 RTX 5090에서 진행됐다. LTX-2는 512×768 해상도, 100프레임, 20스텝으로 측정됐다. 플럭스.2 클라인 9B(기본)는 1024×1024 해상도, 20스텝으로 테스트됐다.

최신 엔비디아 스튜디오 세션(Studio Sessions) 튜토리얼에서 시각 효과 아티스트 맥스 노박(Max Novak)이 진행하는 단계별 가이드를 확인할 수 있다.

GDC에서 공개된 RTX AI PC 최신 업데이트

- 3월 16일부터 19일(현지시간)까지 미국 새너제이에서 엔비디아 GTC가 개최된다. 3월 17일(현지시간)에는 ‘컴피UI에서 디자인·시각화를 위한 생성형 AI 워크플로우 구축하기(Create Generative AI Workflow for Design and Visualization in ComfyUI)’ 세션이 진행되며, 엔비디아 3D 워크플로우 전문가들이 이미지, 비디오, 3D, PBR 소재를 위한 RTX 가속 생성형 워크플로우 구축 방법을 소개할 예정이다. 여기에서 행사에 등록하고 세션 카탈로그를 확인할 수 있다.

- LTX 데스크톱(LTX Desktop)은 LTX 엔진에서 직접 실행되는 로컬 오픈소스 비디오 편집기로, 엔비디아 GPU와 호환 하드웨어에 최적화돼 있다.

- LM 링크(LM Link)는 LM 스튜디오(LM Studio)를 실행하는 여러 장치를 연결해 원격 장치의 모델을 마치 로컬에서 실행되는 것처럼 사용할 수 있도록 한다. 이는 노트북에서 에이전트를 실행하면서 DGX 스파크나 RTX 데스크톱이 제공하는 무료 개인 AI 성능을 활용하려는 사용자에게 적합하다. 여기에서 LM 스튜디오를 DGX 스파크에서 실행하는 방법을 확인할 수 있다.

- 3월 31일(현지시간)에는 옵트인(opt-in) 엔비디아 앱(App) 베타의 일환으로 지포스 RTX 50 시리즈 사용자에게 엔비디아 DLSS 4.5 다이내믹 멀티 프레임 생성(Dynamic Multi Frame Generation)과 DLSS 4.5 멀티 프레임 생성 6배 모드(Multi Frame Generation 6x Mode) 오버라이드(Override) 기능이 제공될 예정이다. 여기에서 엔비디아 GDC 소식을 확인할 수 있다.

- 다음 달에는 새로운 엔비디아 RTX 리믹스(RTX Remix) 업데이트로 고급 파티클(Advanced Particle) VFX 기능이 추가된다. 이를 통해 모더들은 더욱 다양한 파티클 효과를 구현하고 이미지 품질과 디테일, 몰입감을 한층 높일 수 있게 된다.

- 토파즈 랩스(Topaz Labs)는 엔비디아와 협력해 뉴로스트림(NeuroStream)을 엔비디아 GPU에 최적화했다. 뉴로스트림은 복잡한 AI 모델을 소비자용 하드웨어에서도 실행할 수 있도록 지원하는 독자적인 VRAM 최적화 기술이다.

- 마이크로소프트(Microsoft)는 보이스모드(VoiceMod) 지원을 시작했다. 보이스모드는 GPU 추론을 위한 윈도우 ML(Windows ML)을 지원하는 대표적인 앱으로, CPU 대비 성능과 음성 품질을 크게 개선한다.

페이스북(Facebook), 인스타그램(Instagram), 틱톡(TikTok), X에서 엔비디아 AI PC에 연결하고 RTX AI PC 뉴스레터를 구독해 최신 소식을 받아볼 수 있다. 링크드인(LinkedIn)과 X에서 엔비디아 워크스테이션(Workstation)을 팔로우할 수 있다.