국내 생성형 인공지능(AI) 전문 기업 딥브레인AI가 XR 기반 메타버스 서비스 목적의 3D AI 휴먼 NPC(Non-Player Character) 인터페이스 개발도구인 ‘페르소나 XR AI 휴먼 SDK’ 개발을 완료했다고 15일 밝혔다.
가상현실(VR)·증강현실(AR) 등 확장현실(XR) 콘텐츠에서는 이용자와 상호작용이 몰입도를 높이는 핵심 요소다. 딥브레인AI는 자체 개발한 고속 음성합성(TTS) 기술, 음소 단위 립싱크 엔진, 거대언어모델(LLM) 기반 발화 생성 기술을 적용해 이용자의 질문에 즉각 반응하는 실시간 대화형 AI 휴먼 NPC를 구현했다.
해당 SDK는 유니티(Unity) 기반 플러그인 형태로 제공돼 XR 콘텐츠 개발자가 음성 대화가 가능한 AI 휴먼 NPC를 기존 콘텐츠에 손쉽게 적용할 수 있도록 설계됐다. 개발자는 NPC의 성별과 외형, 음성, 제스처, 페르소나를 자유롭게 설정할 수 있다. 답변을 생성하는 인공지능 모델도 콘텐츠의 목적과 분위기에 맞게 교체 가능하다. 윈도우와 맥OS는 물론 안드로이드 기반 모바일 XR 기기까지 지원한다.
NPC의 표정과 몸짓, 목소리 등은 설정된 페르소나를 기반으로 구현된다. 개발자가 NPC의 역할과 성격을 정의하면 적합한 표정, 동작, 음성이 함께 적용된다. 딥브레인AI의 감정 인식 기술과 연동해 이용자의 질문 내용과 표정, 목소리 등을 실시간으로 분석하고 상황에 맞는 감정 표현을 담은 응답도 구현한다.
발화 내용과 화법 역시 LLM을 활용해 설정된 페르소나와 대화 맥락에 맞게 생성된다. 시나리오 기반 학습을 거친 표준 모델을 통해 상황이 달라져도 일관된 캐릭터를 유지하도록 제어한다.
딥브레인AI는 이번 AI 휴먼 NPC SDK를 전시·박물관, 교육, 관광, 공공 안내 등 다양한 분야의 XR 콘텐츠 제작기업에 순차적으로 공급할 계획이다. 개발된 NPC·UI 컴포넌트는 분야별 템플릿 형태로 제작해 통합 플랫폼을 통해 배포하고, XR 콘텐츠 제작사가 사용자 경험(UX) 평가 서비스도 함께 이용할 수 있도록 서비스화 한다는 방침이다.
장세영 딥브레인AI 대표는 “이번 성과는 AI 휴먼 기술을 XR 콘텐츠 제작 현장에서 곧바로 활용할 수 있는 형태의 개발도구로 완성했다는 데 의미가 있다”며 “전시, 교육, 공공 서비스 등 다양한 영역에서 AI 휴먼이 실질적인 솔루션으로 자리 잡을 수 있도록 연구개발을 지속하겠다”고 밝혔다.
이정인 기자 lji2018@segye.com
