AI 모델이 기능적으로는 완벽해도 '재미'나 '매력'이 부족한 결과물을 내놓는 경우가 많습니다. 이러한 문제를 해결하기 위해 인간의 주관적인 평가를 대규모로 수집하는 플랫폼 디자인아레나(DesignArena)가 790만 달러(약 97억 원)의 시드 투자를 유치하며 주목받고 있습니다. 이들은 AI 모델이 사용자 취향에 맞는 결과물을 만들도록 돕는 핵심적인 역할을 합니다.
디자인아레나는 공동 창업자인 그레이스 리(Grace Li)가 2025년 졸업을 앞두고 친구들과 AI 게임 엔진을 개발하던 중, '재미없는 게임'이라는 문제에 직면하며 시작되었습니다. 게임의 재미를 판단하는 데는 인간의 평가가 필수적임을 깨닫고, 대규모로 솔직한 피드백을 얻는 방법을 모색한 결과가 바로 디자인아레나입니다. 현재 530만 명의 사용자가 웹사이트, 이미지 등 다양한 시각적 결과물에 대해 'A vs. B' 방식의 선호도 평가를 제공하며, 이는 AI 모델의 디자인 개선에 중요한 병목 지점을 해소해줍니다. 특히 아시아 지역 대시보드에서 더 '맥시멀리스트' 디자인 스타일이 선호되는 등 지역별 취향 변화도 추적합니다. 이 플랫폼은 현재 연간 6천만 달러(약 820억 원)의 매출을 올리고 있습니다.
디자인아레나의 성공은 AI 모델 개발에 있어 자동화된 벤치마크만으로는 부족하며, 인간의 미묘한 취향과 선호도를 반영한 피드백이 얼마나 중요한지를 보여줍니다. 이는 '프론티어 랩(frontier lab)'이라 불리는 최첨단 AI 연구소들이 기꺼이 비용을 지불할 만큼 가치 있는 서비스로 인식되고 있습니다. 허깅페이스(Hugging Face) 해킹 사건에서 보듯 자동화된 평가 시스템이 조작될 수 있는 위험을 고려할 때, 로그인 기반의 크라우드소싱 인간 평가는 더욱 신뢰성 있는 보완책이 됩니다. 이러한 인간 중심의 평가 데이터는 AI 모델이 단순히 기능적인 것을 넘어, 실제 사용자의 감성과 취향을 만족시키는 방향으로 발전하는 데 필수적인 요소로 자리매김하고 있습니다.