AI 시스템과 디지털 제품을 평가하는 데 있어 인간 평가는 비용이 많이 들고, 시간이 오래 걸리며, 확장하기 어렵다는 한계가 있습니다. 이러한 문제를 해결하기 위해, 대규모 시뮬레이션 사용자 평가 인프라 'MatrAIx(매트릭스)'가 등장했습니다. MatrAIx는 83억 개의 이질적인 페르소나(Persona)를 활용하여 실제와 같은 사용자 행동을 모방, AI와 디지털 제품의 테스트 및 개선 과정을 혁신할 잠재력을 보여줍니다.
MatrAIx는 세 가지 핵심 구성 요소로 이루어져 있습니다. 첫째, '페르소나 8B(Persona 8B)'는 1,290개의 범주형 차원으로 표현된 83억 개의 페르소나 기록을 포함합니다. 이 기록들은 상호 연관된 속성을 보존하는 종속성 그래프에서 샘플링되거나 실제 사람이 작성한 프로필에서 파생됩니다. 연구팀은 약 100만 개의 고품질 페르소나(599,847개는 실제 사람 기반, 400,000개는 합성)를 코어셋으로 공개했습니다. 둘째, 'MatrAIx 플레이그라운드(MatrAIx Playground)'는 설문조사, AI 챗봇, 웹, 앱의 네 가지 환경을 제공하여 다양한 사용자가 디지털 제품과 상호작용하고 평가할 수 있도록 합니다. 셋째, MatrAIx는 상거래, 소프트웨어, 금융, 헬스케어 등 25개 이상의 도메인에 걸쳐 1,010개의 애플리케이션 작업을 제공합니다. 연구팀은 클로드 오푸스 4.8(Claude Opus 4.8), GPT 5.5, 클로드 하이쿠 4.5(Claude Haiku 4.5) 등 세 가지 대규모 언어모델(LLM)을 활용하여 8가지 대표적인 작업에 대해 18,189건의 평가 시험을 수행했으며, 가격 인상 후 망설임, AI 비서 실패 후 계속 사용 의지, 지연 시간 허용 범위 등 페르소나 배경에 따른 의사결정과 선호도 변화를 성공적으로 포착했습니다.
MatrAIx의 등장은 AI 및 디지털 제품 개발 방식에 중대한 변화를 가져올 것입니다. 실제 사용자 테스트에 드는 막대한 비용과 시간을 절약하면서도, 훨씬 더 다양하고 광범위한 사용자 시나리오를 시뮬레이션할 수 있게 됩니다. 이는 제품 출시 전 잠재적인 문제점을 조기에 발견하고, 다양한 사용자층의 요구사항을 반영하여 제품의 완성도를 높이는 데 결정적인 역할을 할 것입니다. 특히, 다양한 문화적 배경과 행동 양식을 가진 전 세계 사용자들을 대상으로 한 제품 개발에 있어 MatrAIx와 같은 시뮬레이션 인프라는 필수적인 도구가 될 것으로 보입니다.