최근 공개된 AI 동료 '바르코스(Varkos)'는 인기 게임 스카이림(Skyrim)에서 단순한 대화형 NPC를 넘어 실제 게임 세계와 상호작용하며 행동하는 혁신적인 모습을 보여주었습니다. 이 AI 동료는 전투, 수색, 아이템 운반, 다단계 명령 수행 등 복잡한 지시를 실시간으로 처리하며, 플레이어의 음성 명령에 500ms 이내로 반응하는 저지연 성능을 자랑합니다.
바르코스는 Qwen3-ASR 음성 인식, PocketTTS-Raven 음성 합성, 로컬 LLM(대규모 언어 모델) 및 하이브리드 행동 해석기 ALE(Action Latent Encoder)를 스트리밍 방식으로 결합하여 이러한 실시간 상호작용을 가능하게 합니다. 특히 ALE는 명령의 구조, 부정, 대명사 등을 감지하여 '검을 집어 내게 가져오라'와 같은 복합 명령을 연결된 행동 슬롯으로 분해합니다. 또한, 미래 사건을 기다리는 조건부 명령이나 숨바꼭질처럼 지속적인 계획을 수립하고, 게임 세계의 변화에 따라 계획을 수정하거나 중단하는 등 높은 수준의 지능을 보여줍니다. 플레이어와의 공유 경험에 따라 성격이 장기적으로 변하며, 게임 종료 후에도 '보이드 모드(void mode)'를 통해 게임 외부에서 대화하거나 다른 게임으로 이동할 수도 있습니다.
바르코스의 등장은 기존 LLM 기반 NPC 프레임워크가 역할극과 캐릭터 유지에는 뛰어나지만, 실제 세계에서 행동하는 능력이나 복잡한 지시 수행에 약점을 보였던 한계를 극복했다는 점에서 의미가 큽니다. 이는 단순히 대화만 하는 NPC를 넘어 플레이어와 함께 실제 게임을 즐기는 새로운 형태의 AI 동료를 제시하며, 향후 게임 산업에 새로운 매체이자 경험을 제공할 잠재력을 가지고 있습니다. 개발팀은 장기적으로 하나의 캐릭터가 여러 게임을 오가며 플레이어와 함께할 수 있도록 확장할 계획입니다. 이러한 AI 동료는 수작업으로 만들어진 캐릭터를 대체하기보다는, 싱글 플레이 게임에서 '혼자 플레이하지만 혼자가 아닌' 새로운 몰입감을 선사할 것으로 기대됩니다.