텐센트(Tencent)가 시각 인식과 컴퓨터 조작 기능을 통합한 멀티모달(multimodal) AI 모델 'Hy4'의 정식 버전을 선보였습니다. 이 모델은 이미지와 차트를 이해하고, 명령줄 인터페이스(CLI)와 그래픽 사용자 인터페이스(GUI)를 넘나들며 블렌더(Blender)나 CAD 같은 전문 소프트웨어를 다룰 수 있는 것이 특징입니다. 텐센트는 Hy4를 자사 클라우드 서비스와 오픈라우터(OpenRouter)에 먼저 적용하며, 추후 모델 가중치(weights)도 공개할 계획입니다.
Hy4는 게임 개발과 금융 분석 분야에서 특히 인상적인 성능을 보여줍니다. 게임 개발 벤치마크에서는 이전 버전인 Hy4 프리뷰(preview) 대비 게임데브(GameDev) 점수가 19.1%, 게임로직(GameLogic) 점수가 9.8% 향상되었습니다. 또한, 213명의 금융 전문가가 참여한 579개 실무 과제 벤치마크에서는 비교 대상 오픈 가중치 모델 중 가장 높은 점수를 기록했습니다. 28억 화소 항공사진에서 2미터 크기의 옥상 부품을 찾아내거나, 복잡한 금융 보고서를 분석하고 엑셀(Excel) 모델을 구축하는 등 실제 업무 환경에서 활용될 수 있는 다양한 시연 사례가 공개되었습니다. 텐센트는 환각(hallucination)률을 15.76%에서 5.45%로, 추측으로 인한 오류는 23.1%에서 5.6%로 크게 줄였다고 밝혔습니다.
이번 Hy4 출시는 AI가 단순한 정보 제공을 넘어 실제 복잡한 업무를 수행하는 에이전트(agent)로서의 가능성을 한층 더 확장했음을 의미합니다. 특히 전문 소프트웨어 조작 능력은 다양한 산업 분야에서 자동화와 효율성 향상에 기여할 수 있습니다. 텐센트가 Hy4와 함께 과학 연구용 기반 모델인 HyCell과 HyPDE를 오픈소스로 공개한 점은 AI 기술의 민주화와 과학 발전에도 긍정적인 영향을 미칠 것으로 보입니다. 이는 AI가 특정 기업의 전유물이 아니라, 더 넓은 커뮤니티에서 활용되고 발전할 수 있는 도구임을 시사하며, 향후 AI 기술 발전의 방향성을 제시하는 중요한 이정표가 될 것입니다.