NVIDIA RTX 기술은 NVIDIA RTX Branch of Unreal Engine과 NVIDIA DLSS Unreal Engine 플러그인을 통해 Unreal Engine 5에 깊이 통합되어 있습니다. 덕분에 개발자들은 고급 렌더링, 프레임 생성, 광선 추적 조명에 직접 접근할 수 있습니다. NVIDIA는 Unreal Fest 2026에서 발표한 것처럼, 온디바이스 AI 캐릭터와 게임플레이 구축을 위한 새로운 도구로 이 통합을 확장하고 있습니다.
이 글에서는 다음 내용을 다룹니다.
- 온디바이스 AI 동반자 구축을 위한 새로운 NVIDIA ACE Game Agent SDK
- 블루프린트 및 C++ 지원이 포함된 ASR, LLM, TTS를 위한 새로운 NVIDIA ACE Unreal Engine 5 플러그인
- 새로운 ACE 플러그인을 다루는 6월 30일 실시간 Level Up with NVIDIA 웨비나
- Unreal Engine에서 DLSS 4.5를 시작하는 방법
NVIDIA ACE로 온디바이스 AI 동반자를 더 쉽게 구축하기
AI는 기존에는 불가능했던 경험을 제공하며 차세대 NPC(비플레이어 캐릭터)의 등장을 이끌고 있습니다. 예를 들어, KRAFTON은 최근 PUBG: BATTLEGROUNDS의 AI 팀메이트 ‘Ally’를 선보였습니다. Ally는 자연스러운 음성 상호작용을 통해 플레이어 의도를 파악하고, 게임플레이를 해석하며, 실시간으로 동적으로 반응합니다. 고정된 스크립트를 따르는 대신, Ally는 협력하고 전투나 약탈 상황에 적응하며 자연스럽게 소통합니다. 그리고 GeForce RTX로 구동되어 AI가 완전히 온디바이스에서 실행됩니다. PUBG Ally는 곧 오픈 베타로 제공될 예정입니다.
온디바이스 AI NPC를 구축하려면 단순히 올바른 AI 모델을 선택하는 것을 넘어, 이를 매끄럽고 효율적인 고성능 파이프라인에 통합해야 합니다. 개발자는 즉각적인 응답을 위해 대화 지연 시간을 최소화하고, 전역 및 동적 게임 상태를 동기화하며, NPC가 무한 루프에 빠지지 않도록 방지하는 등 실제 플레이 가능한 경험을 구현하기 위해 여러 과제를 해결해야 합니다.
NVIDIA ACE Game Agent SDK 베타와 Unreal Engine 5 플러그인을 활용하면 게임 개발자와 ISV(독립 소프트웨어 벤더)는 반응성이 뛰어난 온디바이스 AI 동반자를 더 쉽게 구축하고 배포할 수 있습니다.
NVIDIA ACE Game Agent SDK란 무엇인가?
NVIDIA ACE Game Agent SDK는 원활한 네이티브 인게임 통합을 위해 설계된 경량 C/C++ 에이전트 프레임워크입니다. 소형 모델에 최적화되고 NVIDIA RTX로 하드웨어 가속되는 오픈 소스의 완전 맞춤형 솔루션입니다.
개발자는 세 가지 핵심 API 카테고리를 통해 SDK와 상호작용합니다.
- Agent API: 채팅 기록을 관리하고 최소한의 애플리케이션 코드로 다단계의 도구 기반 추론을 자율적으로 구동하는 상태 저장(stateful) API
- Chat API: 개발자가 추론을 직접 제어할 수 있는 무상태(stateless) API
- RAG API: 개발자가 구축한 데이터베이스에서 시맨틱, 어휘, 하이브리드 지식 검색을 가능하게 해 최신 지식으로 모델 응답을 근거 있게 만드는 API
이러한 도구들은 NPC가 실시간 플레이어 입력을 바탕으로 게임 세계를 동적으로 인식하고, 추론하며, 행동할 수 있도록 지원합니다. 이 도구들은 Total War: PHARAOH의 실험적 인게임 AI 어드바이저 등 실제 게임에서 검증을 거쳤습니다. 고대 이집트 파라오로 표현된 이 어드바이저는 반란을 진압하기 위한 궁정 행동과 건축 추천 등 상황에 맞는 조언을 제공하며, 플레이테스트 프로그램이 2026년에 출시됩니다. 이 어드바이저는 1,200개 이상의 상호 연결된 게임 데이터 테이블을 조회해 플레이어의 전략 질문에 실시간으로 답하는 검색 증강 생성(RAG) 아키텍처를 사용합니다.
게이밍의 미래를 구축하려면 베타 버전 NVIDIA ACE Game Agent SDK를 다운로드하세요.
새로운 NVIDIA ACE Unreal Engine 5 플러그인 모음에는 무엇이 있나요?
Unreal Engine 5 개발자와 테크니컬 아티스트를 위한 새로운 NVIDIA ACE 플러그인 모음이 출시되었습니다. 이 로컬 런타임 AI 모델은 블루프린트와 C++ 통합을 기본으로 지원하며, 세 가지 핵심 기능을 제공합니다.
- 자동 음성 인식(ASR): 즉시 사용 가능한 영어 언어 모델 nemo-conformer-ctc-120m과 함께 7개 추가 언어 다운로드 옵션, 샘플 레벨, 빠른 설정을 위한 블루프린트 예제를 포함합니다.
- 소형 언어 모델(SLM): 낮은 지연의 텍스트 생성과 함수 호출 기능을 위한 로컬 GGUF 지원을 제공하며, 즉각적인 캐릭터 대화와 의사결정에 최적화되어 있습니다. 즉시 사용 가능한 Qwen 3.5 4B 모델도 포함합니다.
- 텍스트 음성 변환(TTS): 고품질 Chatterbox Turbo 350M TTS 모델, 예시 음성, 샘플 레벨, 전용 플러그인 콘텐츠를 포함해 즉시 캐릭터에 생동감을 불어넣습니다.
이 플러그인들은 창작자가 실시간 전사, 동적 캐릭터 대화, 음성 명령, 상황별 행동 응답을 게임 로직 안에서 직접 구현할 수 있도록 합니다.
높은 지연과 예측 불가능한 운영 비용 문제를 안고 있는 클라우드 기반 서비스와 달리, 이 플러그인들은 즉시 사용 가능한 모델이 번들로 포함된 로컬 RTX 최적화 워크플로를 제공합니다. Unreal Engine 5 프로젝트에 즉각적인 엔드 투 엔드 AI NPC 파이프라인을 바로 제공합니다.
NVIDIA ACE Unreal Engine 5 플러그인을 다운로드해 시작하고, 지원과 토론을 위해 NVIDIA Developer Discord 커뮤니티에 참여하세요.
자세한 내용은 6월 30일 실시간 Level Up with NVIDIA 웨비나인 Building AI-Powered NPCs in Unreal Engine 5.7에 등록해 확인하세요. 이번 웨비나에서는 해당 플러그인에 대한 더 자세한 정보를 제공하며, 직접 궁금한 점을 질문할 기회도 마련되어 있습니다.
새로운 NVIDIA DLSS 4.5 Unreal Engine 플러그인은 무엇인가요?
새로운 DLSS 4.5 Unreal Engine 플러그인은 DLSS 4.5 Dynamic Multi Frame Generation, Multi Frame Generation 6X Mode, Super Resolution을 위한 두 번째 해상도 트랜스포머를 지원합니다.
이 플러그인은 최신 DLSS Super Resolution 및 Frame Generation 업데이트에 직접 접근할 수 있습니다. Streamline 기반으로 구축된 이 플러그인은 DLSS 기능 전반에 걸쳐 일관된 통합 경로를 제공해, 개발자가 Ray Reconstruction이나 Dynamic Multi Frame Generation 같은 기능을 선택적으로 도입할 수 있습니다. 업데이트된 API, 문서, 샘플 코드는 통합 시간을 단축하고 신규 및 기존 프로젝트 모두에 DLSS를 쉽게 도입할 수 있도록 합니다.
Unreal Fest 2026에서 더 알아보기
Unreal Fest 2026에서 NVIDIA와 함께 NVIDIA ACE와 Unreal Engine이 인터랙티브 캐릭터 퍼포먼스의 미래를 어떻게 재정의하는지 알아보세요.
6월 17일에 진행된 Ready, Set, Action: Why Your Next NPC Should Be Their Own Method Actor세션에서는 NPC의 역할과 연기자(퍼포머)를 분리하는 자율 게임 캐릭터 구축의 새로운 워크플로우를 소개했습니다. 이 세션에서는 깊이 있게 반응하면서도 언제나 캐릭터 본연의 모습에 충실한 AI 개성을 만드는 방법을 확인할 수 있습니다. 대형 교사 모델이 생성한 합성 학습 데이터를 활용해 캐릭터의 행동을 경량화된 배포 가능 LoRA 기반 퍼포먼스로 증류하고, 이를 NVIDIA GeForce RTX 하드웨어에서 로컬로 실행하는 방법을 배울 수 있습니다.
이 세션에서는 게임 개발자가 Unreal Engine 5.7에서 NVIDIA ACE를 활용해 완전히 온디바이스로 구동되는 인터랙티브 MetaHuman NPC를 손쉽게 제작하는 방법을 소개합니다.
- ACE UE Speech 플러그인: 실시간 음성 인식을 위한 Riva Parakeet ASR, 풍부한 음성 합성을 위한 Chatterbox TTS
- 안면 애니메이션 및 퍼포먼스 전달을 위한 Audio2Face
최신 워크플로는 NPC가 게임플레이 중 캐릭터에 충실하게 동적으로 퍼포먼스를 수행한 뒤, 개발자와 직접 협력해 동기를 다듬고, 배경 이야기 소재를 생성하고, 미래 학습 데이터 구축을 지원하는 방식을 제공합니다.
AI 기반 기능을 탑재한 풀 스케일 1인칭 Chalk Warfare 게임
3억 5,000만 뷰를 자랑하는 Chalk Warfare 시리즈를 제작한 스튜디오 SOKRISPYMEDIA는 해당 프랜차이즈를 기반으로 풀 스케일 1인칭 액션 게임을 개발 중이며, 핵심 기능은 로컬 AI에 기반합니다. 플레이어가 원하는 무기를 직접 그리면 게임이 몇 초 안에 이를 통합하며, 모델은 각 무기를 잡고, 발사하고, 반동을 처리하고, 재장전하는 방식을 처리하도록 학습됩니다.
비용이 많이 드는 클라우드 컴퓨팅 없이 맞춤형 매칭 모델을 학습하기 위해, 팀은 듀얼 NVIDIA RTX PRO 6000 Blackwell Max-Q Workstation Edition GPU를 탑재한 Puget Systems 워크스테이션을 활용했습니다. 2D 콘텐츠에서 플레이어블 미디어로 도약하는 실시간 렌더링 베테랑들이 AI 학습에 최적화된 하드웨어를 활용한 사례입니다.
Unreal Engine에서 이제 사용 가능한 프롬프트 가능한 제어형 인체 동작
NVIDIA는 프롬프트 가능한 제어형 인체 동작을 위한 오픈 소스 프로젝트인 NVIDIA Kimodo를 공개했습니다. 일반 언어로 동작을 설명하고(“한 사람이 즐겁게 앞으로 걷다가 공중으로 점프합니다”), 정밀한 아트 디렉션을 위해 특정 뼈대나 전신 키프레임을 고정하면, 몇 초 안에 복잡한 인체 동작을 생성할 수 있습니다.
이 프로젝트를 기반으로 Animotive Kimodo는 Kimodo를 Unreal Engine에 직접 통합한 플러그인으로, 애니메이터가 에디터를 벗어나지 않고 자신의 리그에서 AI 생성 동작을 정제하고, 레이어를 추가하고, 수동으로 키잉할 수 있도록 합니다. AI 동작은 창작을 대체하는 고정된 결과물이 아닌 출발점으로 활용됩니다.
Unreal Engine 플러그인은 이미 출시되었으며, Blender 및 Maya 통합은 이후 제공될 예정입니다. 자체 호스팅 또는 Animotive Cloud를 통해 이용 가능합니다. 향후 업데이트에서는 AAA 스튜디오가 자체 애니메이션 데이터셋을 안전하게 업로드해 고유한 인하우스 스타일을 학습시킬 수 있게 될 예정입니다. Animotive Kimodo 출시에 대해 자세히 알아보세요.
Unreal Engine 5에서 NVIDIA ACE 및 DLSS 4.5 시작하기
Unreal Fest 2026에서 NVIDIA는 ACE Game Agent SDK, 새로운 Unreal Engine 5 플러그인, DLSS 4.5를 포함해 NVIDIA ACE를 통해 온디바이스 AI 캐릭터와 게임플레이를 실현하는 더 많은 기능을 발표하고 있습니다.
7월 20일 SIGGRAPH 2026에서 NVIDIA AI 연구 리더 Sanja Fidler, Ming-Yu Liu, David Luebke와 함께 컴퓨터 그래픽스와 시뮬레이션의 미래를 형성하는 최신 혁신을 살펴보세요.
게임 개발자를 위한 리소스
전체 게임 개발자 리소스 목록을 확인하고 최신 NVIDIA 게임 개발 소식을 받아보세요.
