DLSS 5 등장, 기대와 위화감이 동시에 분출 AI 렌더링 시대의 개막

NVIDIA가 GTC 2026에서 발표한 "DLSS 5"는 기존의 DLSS의 연장선상에 있는 새로운 기능이라기보다는, 게임 그래픽의 사고방식 자체를 한 단계 더 발전시키려는 시도로 받아들여지고 있다. 기존의 DLSS가 주로 업스케일링이나 프레임 생성에 의해 제한된 계산 자원 내에서 고해상도 및 고프레임 레이트를 실현하기 위한 기술이었다면, DLSS 5는 AI를 사용하여 조명이나 재질의 외관 자체를 재구성하여 더 "사진처럼 보이는" 화면을 목표로 하고 있기 때문이다. NVIDIA 자신도 이를 2018년의 실시간 레이트레이싱 등장 이후의 큰 도약으로 위치시키고 있으며, 이번 가을의 제공 시작을 예정하고 있다.

공식 설명에 따르면, DLSS 5는 각 프레임의 색상 정보와 모션 벡터를 입력으로 받아, 장면에 대해 포토리얼한 조명과 재질 표현을 추가한다. 게다가 단순한 "임시 방편의 보정"이 아니라, 원래의 3D 콘텐츠에 앵커되어 프레임 간에도 일관성을 유지하도록 설계되어 있다고 한다. 개발자는 강도, 색조, 적용 범위 등을 세밀하게 조정할 수 있으며, 특정 객체나 영역을 마스크하여 제외할 수도 있다고 한다. NVIDIA는 "아티스트의 의도를 지킨다"고 강조하며, Capcom이 데모 영상의 튜닝을 승인한 것도 설명하고 있다.

여기까지 보면, DLSS 5는 이상적인 진화로 보인다. 게임 개발은 해마다 비용이 증가하고, 레이트레이싱이나 패스트레이싱과 같은 고급 표현은 어쩔 수 없이 계산 부하와의 싸움이 된다. 만약 AI가 실시간으로 "한 걸음 부족한 질감"을 채워줄 수 있다면, 제한된 하드웨어에서도 영화적인 외관에 가까워질 수 있다. NVIDIA가 내세우는 "게임과 현실의 다리"라는 표현에도 나름의 설득력은 있다. 실제로 공식 데모에서는 피부의 서브서피스 표현, 천의 광택, 머리카락에 대한 빛의 표현, 석재나 잎의 질감 등, 이전에는 높은 부하를 지불하지 않으면 얻기 어려웠던 정보량이 강조되었다.

그러나 발표 직후부터 커뮤니티에서 확산된 분위기는 단순한 찬사 일색은 아니었다. TweakTown이 전한 것처럼, 첫 번째 큰 논쟁점이 된 것은 'Resident Evil Requiem'의 캐릭터 "Grace"의 외관이었다. 일부 사용자에게는 조명이 개선되었다기보다는 얼굴 자체가 "AI로 미화된" 것처럼 보였다. 피부가 매끄러워지고, 화장을 더한 것처럼 보이며, 공포나 긴장감을 지탱하는 본래의 조형에서 벗어난 것 같다는 반응이었다. 여기서 일어난 것은 단순한 취향의 차이가 아니다. 많은 사람들이 위화감을 느낀 것은, DLSS 5가 "정보를 보완하고 있는" 것이 아니라, "작품의 외관을 다른 방향으로 유도하고 있는" 것처럼 보였기 때문이다.

이 반응은 인물 표현에서 더욱 강하게 드러났다. EA SPORTS FC의 데모에서는 실존 선수의 얼굴이 비교 대상으로 명확했기 때문에, "원래의 CG보다 더 리얼하게 보이는가"뿐만 아니라, "본인다움을 유지하고 있는가"가 엄격하게 평가되었다. Reddit의 반응에서는 Virgil van Dijk로 보이지 않게 되었고, 다른 사람처럼 보인다는 취지의 목소리가 상위에서 공유되었다. 즉, 환경 표현의 강화는 환영할 수 있어도, 실존 인물의 얼굴이나 민족적 특징, 나이감까지 AI가 마음대로 평준화해버리는 것처럼 보인다면, 그것은 "고품질화"가 아니라 "균질화"에 가까운 것이 아닌가 하는 의문이 제기된 것이다.

SNS 상의 반응을 대략 정리하면, 주로 세 가지 계통이 있었다. 첫 번째는 "배경이나 물체의 질감은 대단하지만, 인간의 얼굴은 불쾌하다"는 것이다. 이는 단순한 부정이 아니라, 기술의 효과가 나타나는 영역과 아직 위험한 영역을 구분해서 보고 있다. 두 번째는 "이것은 사실화가 아니라, AI적인 '과장'이다"라는 비판으로, 게임의 아트 스타일이나 캐릭터 디자인을 덮어버리는 것에 대한 경계감이 강하다. 세 번째는 "아직 초기 단계의 데모이며, 조정으로 상당히 개선될 것이다"라는 옹호적인 시각이다. 실제로 Reddit에서도 환경 표현의 임팩트 자체는 높게 평가하는 목소리가 있으며, 부정 일변도는 아니다.

이 논의가 흥미로운 것은, DLSS 5에 대한 반발이 "AI라서 싫다"는 한 점에 집약되지 않는다는 점이다. PC Gamer가 지적한 것처럼, 이번 데모는 "생성 AI가 작품을 비슷한 방향으로 평준화해버리는 것이 아닌가"라는 우려를 자극했다. 이른바 "미의 평균화"에 대한 위화감이다. 게임의 캐릭터는 반드시 현실의 인물 사진처럼 있을 필요는 없다. 약간 과장된 음영, 거친 느낌, 피로감, 독특한 골격, 작품 세계에 맞춘 색채 설계――그러한 요소의 총체가 그 게임의 인격을 만든다. 거기에 AI가 "더 자연스럽게", "더 아름답게"라는 방향으로 개입하면, 기술적으로는 향상되더라도, 표현으로서는 후퇴로 보일 수 있다.

NVIDIA 측도 물론, 그 논점을 이해하지 못하는 것은 아니다. FAQ에서는 DLSS 5는 색상 정보와 모션 벡터를 원래의 3D 콘텐츠에 결합한 후 처리하며, 개발자가 강도나 색조, 대비, 채도, 감마, 적용 마스크를 제어할 수 있다고 설명하고 있다. 요컨대 "AI에 전부 맡기는" 것이 아니라, "AI를 새로운 브러시로 사용하는" 구조다. 이것이 잘 작동하면, DLSS 5는 아트를 파괴하는 장치가 아니라, 적은 부하로 분위기를 높이는 실용적인 도구가 될 수 있다. 문제는, 그 설명이 맞다고 해도, 처음 보여준 데모가 많은 사람에게 그렇게 보이지 않았다는 점에 있다. 기술의 잠재력과 첫 인상이 맞물리지 않은 것이다.

그리고, 여기가 이번 소동의 핵심이기도 하다. DLSS 5는 기존의 DLSS처럼 "화질과 성능의 균형"을 논하는 것만으로는 끝나지 않는다. 이는 "무엇을 본래처럼 부를 것인가", "게임의 그림 제작은 어디까지 작가의 의도에 따라야 하는가"라는, 상당히 근본적인 질문을 던지고 있다. 예를 들어 호러 게임이라면, 약간 인공적이고, 어딘가 불안정해 보이는 얼굴이나 공간이 오히려 정답일지도 모른다. 스포츠 게임에서도, 본인다움을 잃으면서까지 피부나 머리카락을 "아름답게 보정"하는 것이 정말 리얼한 것인지는 의문이다. DLSS 5는 포토리얼화의 비용을 낮추는 기술인 동시에, "포토리얼이란 무엇인가"의 정의를 흔드는 기술이기도 하다.

하지만, 그렇다고 해서 DLSS 5를 실패로 단정하는 것도 이르다. NVIDIA의 공식 발표에서는, 대응 예정 타이틀로 'Assassin’s Creed Shadows', 'Starfield', 'Hogwarts Legacy', 'Resident Evil Requiem' 등이 언급되어 있으며, 대형 퍼블리셔의 관심은 높다. 앞으로, 게임마다 최적화가 진행되고, 인물에는 거의 손대지 않고, 배경·조명·재질감의 강화에 중점을 두는 사용법이 주류가 된다면, 평가는 크게 변할 가능성이 있다. 실제로 커뮤니티에서도 "환경 표현은 상당히 매력적이다"라는 의견은 적지 않다. 즉, DLSS 5가 문제시되는 것은 기술의 유무가 아니라, "어디에, 얼마나, 어떻게 효과를 줄 것인가"라는 운영 설계인 것이다.

이번 SNS의 반응을 보면, 게이머들은 결코 신기술 자체를 거부하는 것은 아니라는 것을 알 수 있다. 오히려, 그들은 매우 민감하게 "기술이 작품에 봉사하고 있는지, 아니면 작품을 균일화하고 있는지"를 구별하려고 한다. 배경의 잎이나 금속, 돌벽의 표정이 풍부해지는 것에는 놀라면서도, 얼굴의 인상이 "어딘가 익숙한 AI 얼굴"로 기울어지는 것에는 강하게 반응한다. 그 온도 차이는, 게임에 있어서 캐릭터의 존재가 단순한 물체가 아니라, 이야기나 감정 이입의 중심이기 때문일 것이다. 화면의 어디를 리얼하게 해야 하고, 어디는 작가성으로 남겨야 하는가. DLSS 5를 둘러싼 찬반은, 그 경계선을 사용자 측이 매우 진지하게 보고 있는 증거이기도 하다.

결국, DLSS 5는 "혁명인가 불타는 사안인가"의 양자택일로 정리하기에는 아까운 기술이다. 적어도 현 시점에서 말할 수 있는 것은, NVIDIA가 게임의 미래를 "더 높은 해상도"나 "더 높은 fps"가 아니라, "AI로 재정의되는 리얼함"으로 나아가려 하고 있다는 것. 그리고, 그 미래상에 대해 사용자는 환영과 경계를 동시에 보이고 있다는 것이다. 만약 앞으로, 개발자가 이 기술을 신중하게 다루고, 작품마다의 미학을 파괴하지 않고 살릴 수 있다면, DLSS 5는 정말로 게임 체인저가 될지도 모른다. 하지만 반대로, 무엇이든 "더 아름답게, 더 사진처럼"으로 몰아가는 방향으로 사용된다면, 게임은 풍부해지기보다는, 비슷한 얼굴, 비슷한 빛, 비슷한 공기감으로 수렴해가는 위험도 있다. DLSS 5의 진정한 승부는, 발표 그 자체가 아니라, 앞으로 각 타이틀에서 어떤 표현으로 정착할 것인가에 달려 있다.

출처 URL
https://www.tweaktown.com/news/110501/dlss-5-is-a-game-changer-but-this-first-look-is-controversial/index.html

NVIDIA 공식 발표 (DLSS 5의 메커니즘, 목표, 대응 예정 타이틀, 제공 시기 확인용)
https://www.nvidia.com/en-us/geforce/news/dlss5-breakthrough-in-visual-fidelity-for-games/

NVIDIA 공식 뉴스 릴리스 (DLSS 5의 발표 개요와 파트너 기업 정보 확인용)
https://nvidianews.nvidia.com/news/nvidia-dlss-5-delivers-ai-powered-breakthrough-in-visual-fidelity-for-games

NVIDIA FAQ (아티스트의 의도, 조정 항목, 마스킹 등의 설명 확인용)
https://www.nvidia.com/en-us/geforce/forums/geforce-graphics-cards/5/583738/dlss-5-faq/

Windows Central (YouTube 및 커뮤니티의 부정적인 초기 반응 보충용)
https://www.windowscentral.com/gaming/nvidias-new-dlss-5-drops-with-uncanny-ai-filters-and-youtube-comments-are-almost-100-percent-negative

PC Gamer ("AI beauty standards"라는 비판적 논점 보충용)
https://www.pcgamer.com/software/ai/dlss-5-clearly-overwrites-game-characters-with-ai-beauty-standards-but-nvidia-says-devs-have-artistic-control/

VGC 경유의 논의 정리 (초기의 비판적 수용 보충용)
https://www.videogameschronicle.com/news/this-is-just-a-garbage-ai-filter-nvidia-met-with-criticism-for-dlss-5s-photoreal-graphics-alterations/

Reddit / r/Games (SNS·게시판 상의 대표적인 반응 확인용)
https://www.reddit.com/r/Games/comments/1rvllr6/this_is_just_a_garbage_ai_filter_nvidia_met_with/

Reddit / r/hardware (FAQ 공유 및 "artist intent" 논점 보충용)
https://www.reddit.com/r/hardware/comments/1rvrgsk/nvidia_dlss_5_faq/