GTC 2026에서 공개된 DLSS 5 는 게이머, 개발자, 하드웨어 분석가들 사이에서 상당한 화제를 불러일으켰습니다. NVIDIA는 PC 그래픽 성능의 역사적인 도약을 예고하고 있지만, 현재까지는 매우 인상적인 데모 영상과 수많은 약속, 그리고 해결되지 않은 여러 질문들만 남아 있습니다.
DLSS 4.5와 멀티 프레임 제너레이션 6x 로 한 해를 시작한 마이크로소프트는 이제 초점을 크게 전환한 새로운 행보를 보이고 있습니다. DLSS 5는 더 이상 단순한 성능 향상 도구가 아니라, 인공지능 모델을 기반으로 거의 영화와 같은 영상미를 구현하여 게임을 시각적으로 재해석하는 시스템으로 설계되었습니다.
NVIDIA DLSS 5는 정확히 무엇이며 이전 버전과 어떻게 다른가요?
DLSS 5는 기존 업스케일링의 단순한 진화가 아니라 실시간 3D 신경망 렌더링 모델 로 정의됩니다 . 더 이상 DLSS 슈퍼 해상도의 새로운 변형이 아니라, 게임의 원래 기하학적 구조를 변경하지 않고 프레임의 모양을 수정하기 위해 렌더링 체인의 마지막 단계에 적용되는 추가 레이어입니다.
이 기술은 각 프레임의 색상 데이터와 모션 벡터를 분석하여 장면에서 일어나는 일을 파악합니다. 캐릭터, 머리카락, 피부, 옷감, 재질 유형, 주변 조명 조건(전면 조명, 후면 조명, 흐린 하늘, 조명이 부족한 실내 등)을 구분하고, 이를 바탕으로 원본 3D 콘텐츠에 맞춰 사실적인 조명과 재질을 생성합니다.
실제로 이는 DLSS 5가 매우 복잡한 조명 효과를 추가 하더라도 GPU 부하를 크게 증가시키지 않는다는 것을 의미합니다. 이는 극도로 공격적인 레이 트레이싱을 사용할 때 발생하는 문제와는 대조적입니다. 기하학적 구조, 충돌 및 게임 플레이는 변경 되지 않으며 , 화면에 동일한 데이터가 표시되는 방식만 바뀝니다.
NVIDIA는 해당 모델이 프레임 간 시간적 일관성을 유지한다고 주장합니다 . 즉, 카메라를 움직일 때 이미지가 깜빡이거나 깨지지 않아야 하며, 개발자가 효과의 강도와 동작을 세밀하게 제어할 수 있으므로 원래의 예술적 의도가 보존된다는 것입니다.
DLSS 5 뉴럴 렌더링 작동 방식
DLSS 5의 핵심은 인터랙티브 월드 제작을 위한 AI 프로토타입 프로젝트와 유사하게, 장면의 의미론을 이해 하도록 처음부터 끝까지 학습된 AI 모델입니다 . 이 모델은 단순히 일반적인 필터를 적용하는 것이 아니라, 그래픽 엔진의 정보(색상, 모션, 깊이, 재질, 사전 조명)를 활용하여 더욱 현실적인 물리적 특성을 가진 픽셀을 생성합니다.
이 개선 사항은 피부 표면의 빛 산란 효과 (빛이 표피를 부분적으로 통과할 때 더욱 자연스러운 모습), 직물이나 금속 표면의 더욱 사실적인 광택, 빛과 머리카락 사이의 더욱 설득력 있는 상호 작용과 같은 효과를 제공하며 , 이 모든 것은 게임에서 정의된 장면 구조를 그대로 유지합니다.
기술적으로 DLSS 5는 파이프라인의 마지막 단계에서 실행됩니다 . 먼저 DLSS 초해상도(업스케일링), 레이 재구성(레이 트레이싱에서 노이즈 제거) 및 프레임 생성 또는 다중 생성과 같은 기술이 적용됩니다. 그런 다음 이미 재구성된 이미지에 신경 모델이 사실적인 재해석을 적용합니다.
이 회사는 해당 시스템이 최대 4K 해상도에서 실시간으로 작동하며 최신 아키텍처의 텐서 코어와 뉴럴 셰이더를 최대한 활용하도록 최적화되었다고 주장합니다. 그러나 GTC에서 선보인 데모 모델은 특히 높은 성능을 요구했습니다. 데모에서는 GeForce RTX 5090 두 개를 사용했는데, 하나는 게임용으로, 다른 하나는 DLSS 5 전용으로 사용되었습니다 . 하지만 최종 목표는 상용 버전에서 단일 GPU로 구동하는 것입니다.
이 기술을 통합하기 위해 스튜디오는 다른 DLSS 변형 기술의 기반이 되는 NVIDIA Streamline 프레임워크를 사용하게 됩니다 . 이를 통해 렌더링 워크플로의 어느 단계에서 기술을 적용할지, 기존 효과와 어떻게 결합할지, 그리고 장면의 미적 왜곡을 방지하기 위해 어떤 부분을 제외할지 결정할 수 있습니다.
창작 통제, 논란, 그리고 공동체 내의 의구심
NVIDIA가 프레젠테이션에서 강조한 핵심 메시지 중 하나는 개발자가 완전한 예술적 제어권을 유지한다는 것이었습니다 . DLSS 5는 강도, 색상, 계조, 대비, 밝기를 조정할 수 있는 매개변수를 제공하며, 신경 모델 활성화를 원하지 않는 장면의 특정 영역을 마스킹할 수도 있습니다.
이러한 수준의 제어는 디지털 파운드리(Digital Foundry) 와 같은 매체에서 공개한 공식 영상 및 비교 자료 이후 제기된 초기 비판에 대한 대응책이기도 합니다 . 특히 스타필드(Starfield)나 레지던트 이블 레퀴엠(Resident Evil Requiem)과 같은 게임의 시네마틱 장면 에서는 결과가 매우 훌륭하지만, 동시에 시각적 스타일을 지나치게 부드럽게 하거나 획일화 하여 소셜 미디어에서 이미 접했던 AI 창작물과 유사한 이미지 유형을 만들어낸다는 인상을 주기도 합니다.
특정 장면에서 얼굴 특징이 미묘하게 변하고, 피부색이 냉소적인 SF 캐릭터라기보다는 광고 이미지처럼 보이며 , 배경의 일부 디테일이 흐릿해지거나 어색하게 재해석되는 현상 이 눈에 띕니다 . 이로 인해 일부 유저들은 AI가 특정 게임의 예술적 정체성을 훼손 할 수 있다는 우려를 제기하고 있습니다 .
하지만 개발사 측에서는 긍정적인 반응도 나오고 있습니다. 베데스다와 캡콤 같은 회사 관계자들은 DLSS 5가 게임 고유의 스타일을 유지하면서도 영화에 가까운 수준의 영상미를 구현하는 데 도움이 될 수 있다고 강조했습니다. 다만, 조정 도구를 효과적으로 활용해야 한다는 전제가 있습니다. 관건은 게임별로 DLSS 5를 어떻게 구현하고 , 원작의 아트 디렉션을 어느 정도 존중하느냐에 달려 있습니다.
지금까지 공개된 내용은 데모 버전과 개발 중인 빌드라는 점을 염두에 두는 것이 중요합니다 . DLSS 5 테스트에 사용된 게임 중 상당수는 처음부터 이 기술을 염두에 두고 설계되지 않았기 때문에, 뉴럴 렌더링을 염두에 두고 특별히 개발된 게임들이 출시되면 결과가 더욱 개선될 것으로 예상하는 것이 합리적입니다.
레이 트레이싱, DLSS 4.5 및 기타 RTX 생태계와의 관계
DLSS 5는 레이 트레이싱이나 패스 트레이싱을 대체하는 기술이 아니며 , DLSS 슈퍼 해상도, 프레임 생성, 멀티 프레임 생성 6배와 같은 기술을 쓸모없게 만드는 기술도 아닙니다. 오히려 기존 기술들을 기반으로 시각적 품질을 한 단계 더 향상시키는 추가적인 기술을 더한 것 입니다.
레이 트레이싱과 패스 트레이싱은 물리적 정확도로 조명을 계산하고 반사, 그림자 및 간접 조명을 처리하는 데 사용되는 기술입니다. DLSS 5는 이러한 렌더링 결과(또는 보다 전통적인 접근 방식)를 기반으로 마치 투사되는 광선의 수가 가상으로 증가한 것처럼 더욱 사실적인 모습을 재구성 하지만, 성능 저하를 최소화합니다.
NVIDIA에서 제안하는 일반적인 파이프라인의 흐름은 다음과 같습니다. 게임이 낮은 내부 해상도로 프레임을 렌더링하고, DLSS Super Resolution이 해당 이미지를 업스케일링하고 재구성합니다 . Ray Reconstruction은 레이 트레이싱 노이즈를 제거하고, Frame Generation 또는 Multi Frame Generation은 중간 프레임을 생성하며, 마지막으로 DLSS 5는 결과에 대한 신경망 해석을 적용합니다 .
이 구조를 보면 DLSS 5가 나머지 처리 과정의 품질에 직접적으로 의존한다는 것을 알 수 있습니다 . 업스케일링이 제대로 되지 않거나 레이 트레이싱 설정이 너무 과하거나 너무 낮으면 신경 모델이 뛰어난 성능을 발휘할 수 없습니다. NVIDIA는 DLSS 5를 RTX 뉴럴 셰이딩, 뉴럴 텍스처 압축, RTX 메가 지오메트리와 같은 기술들을 포함하는 "뉴럴 렌더링" 으로의 광범위한 전환의 일환 으로 제시하고 있습니다.
마케팅 관점에서 젠슨 황 CEO는 이번 DLSS 5 도입을 25년 전 프로그래밍 가능 셰이더의 등장에 비유하며, 기존 렌더링 방식과 생성형 AI를 결합하여 아티스트의 제어권을 유지하면서도 시각적 사실감을 획기적으로 향상시킬 것이라며 "그래픽의 GPT 시대"가 될 것이라고 주장했습니다. 그의 발언은 야심차지만, 게이머들이 직접 자신의 시스템에서 이 기술을 테스트해 보기 전까지는 이러한 기대가 충족될지는 미지수입니다.
호환 하드웨어, 성능 및 전력 소비: 알려진 것과 알려지지 않은 것
하드웨어 분야에서 NVIDIA는 심각한 결함이 있었던 Game Ready 드라이버 사태 이후 매우 신중한 태도를 보여왔습니다 . 현재까지 GTC 2026 데모에 사용된 GeForce RTX 5090 GPU와의 호환성만 명시적으로 확인되었습니다. NVIDIA는 해당 모델이 아직 최적화 단계에 있기 때문에 확정적인 호환성 목록을 제공할 수 없다고 밝혔습니다.
그럼에도 불구하고, 모든 정황은 DLSS 5가 FP8 연산과 최신 텐서 코어를 필요로 한다는 것을 시사하며 , 이는 RTX 50 시리즈와 아마도 RTX 40 시리즈의 상당 부분에 완벽하게 부합합니다. 최악의 경우, 성능이 떨어지는 모델에서는 부분적인 지원만 가능할 수 있지만, 성능이나 메모리 용량에 제약이 있을 수 있습니다 . AMD는 인공지능 기반 PC 시대를 선도하고 있습니다.
RTX 30 시리즈 및 이전 그래픽 카드는 네이티브 FP8을 지원 하지 않으므로 NVIDIA가 INT8 기반의 특정 모델을 출시하지 않는 한 초기에는 DLSS 5 지원 대상에서 제외될 것입니다. 하지만 이는 아직 확정된 바는 없습니다. 시스템 업그레이드를 고려하는 유럽 사용자들에게 DLSS 5는 차세대 하이엔드 및 중상위급 그래픽 카드 구매를 위한 확실한 동기가 될 것입니다.
또 하나 불분명한 점은 성능과 메모리 사용량에 미치는 영향 입니다 . RTX 5090 두 개를 사용한 데모에서는 상당한 리소스 소모가 예상되었는데, 실험적인 구성에서 최대 32GB의 VRAM을 사용하는 것으로 나타났습니다. 일반 게이머를 위한 버전은 이보다 가볍겠지만, 고해상도 에서 모든 성능을 최대한 활용하려면 8GB 이상의 그래픽 메모리가 필요할 것으로 예상됩니다.
NVIDIA는 출시 시점에 맞춰 구체적인 성능 및 VRAM 영향 데이터를 공개 할 예정이며 , 스페인을 비롯한 유럽 전역의 많은 사용자와 전문 매체는 이 데이터를 통해 추가 레이어를 활성화할 가치가 있는지, 아니면 최고 수준의 시각적 품질보다 초당 프레임 수를 우선시하는 것이 더 유리한지 판단할 수 있을 것입니다.
호환 게임 및 주요 퍼블리셔의 지원
기술적인 측면 외에도 NVIDIA가 진정으로 역량을 발휘한 분야 중 하나는 퍼블리셔와 스튜디오 지원 입니다. NVIDIA는 이미 베데스다, 캡콤, 핫타 스튜디오, 넷이즈, NCSOFT, S-GAME, 텐센트, 유비소프트, 워너 브라더스 게임즈 등과 협력하고 있다고 밝혔습니다.
DLSS 5를 지원하는 것으로 발표된 게임 목록은 아직 상용화되지 않은 기술임에도 불구하고 놀라울 정도로 방대합니다. 확정된 게임으로는 스타필드, 레지던트 이블 레퀴엠, 어쌔신 크리드 섀도우, 호그와트 레거시, 델타 포스, 엘더 스크롤 IV: 오블리비언 리마스터드, 나라카: 블레이드포인트, AION 2, 블랙 스테이트, 신더 시티, 저스티스, 씨 오브 레미넌츠, NTE: 네버니스 투 에버니스, 팬텀 블레이드 제로, 웨어 윈즈 미트 등이 있으며, 아직 발표되지 않은 프로젝트도 더 있습니다.
많은 경우, 유럽 PC 시장에서 높은 인기 를 누리고 스페인 게임 언론에서 자주 화제가 되는 게임들을 중심으로 이야기하고 있습니다. 따라서 DLSS 5가 출시되면 성능 및 화질 테스트 결과가 빠르게 나올 것으로 예상됩니다. 스페인의 PC 게이머들에게 DLSS 5는 특히 분위기와 조명 효과가 중요한 역할을 하는 게임에서 PC 버전과 콘솔 버전을 비교할 때 고려해야 할 또 다른 요소가 될 수 있습니다.
제작사들의 입장에서 보면, 일부 공개 성명은 열정적인 모습과 동시에 신중한 접근 방식을 보여줍니다. 베데스다는 DLSS 5가 실시간 렌더링의 전통적인 한계에 얽매이지 않고 아트 스타일과 디테일을 돋보이게 할 것이라고 강조했고, 캡콤은 레지던트 이블 과 같은 프랜차이즈의 분위기와 감정적 효과를 향상시킬 수 있는 잠재력을 강조했습니다.
그럼에도 불구하고, 실제 도입 여부는 DLSS 5를 각 엔진에 통합하는 데 드는 비용 , NVIDIA에서 제공하는 기술 지원, 그리고 특히 버전 간 호환성을 유지해야 하는 멀티플랫폼 프로젝트에서 시각적 이점이 구현에 소요되는 시간과 자원을 상쇄할 만큼 가치가 있는지 여부에 달려 있습니다.
지금까지 발표된 모든 내용을 종합해 볼 때, DLSS 5는 NVIDIA가 단순한 업스케일링과 프레임 생성을 넘어 게임 렌더링의 핵심에 인공지능을 도입하려는 야심찬 실험 으로 보입니다 . 비디오 게임의 그래픽을 실사 영화에 가깝게 끌어올릴 것이라는 약속은 매력적이지만, 호환성, 리소스 소비, 그리고 각 게임의 시각적 정체성 유지 측면에서 합리적인 우려도 제기되고 있습니다. 스페인과 유럽 시장을 포함한 실제 시스템에서의 첫 번째 테스트 결과는 가을까지 기다려봐야 알 수 있을 것입니다. 이 "그래픽의 GPT 혁명"이 게이머들이 기본적으로 활성화되기를 원하는 수준의 그래픽 개선으로 이어질지, 아니면 경우에 따라 유용하지만 다른 경우에는 불필요한 고급 옵션에 그칠지는 그때 가서야 확인할 수 있을 것입니다.
