최근 Claude Fable 5와 GPT-5.6 Sol이라는 두 가지 최신 AI 모델이 단 100달러 미만의 예산으로 완전한 길이의 뮤직비디오를 자율적으로 제작하는 실험에 성공했습니다. 이 실험은 AI에 특정 곡과 가사, 그리고 25달러 또는 100달러의 예산을 제공하고 웹 검색 및 영상 편집 도구(ffmpeg)를 활용해 조사부터 영상 생성, 편집까지 전 과정을 맡겼습니다. 놀랍게도 네 번의 시도 모두 원곡과 결합된 완전한 길이의 유효한 뮤직비디오를 스스로 완성했습니다.
실험 결과, AI 모델들은 스스로 영상 생성 모델과 제작 방식을 선택했으며, 세 번의 시도에서는 텍스트-투-비디오(text-to-video) 방식을, 한 번은 정지 이미지를 먼저 만든 후 애니메이션하는 파이프라인을 구성했습니다. 100달러 예산 실행에서 실제 생성 비용은 GPT-5.6 Sol이 36.57달러, Claude Fable 5가 48.60달러에 그쳤으며, LLM 토큰 비용을 포함해도 각각 39.82달러와 73.65달러로 예산의 절반 정도만 사용했습니다. Fable이 더 빨리 작업을 마쳤지만 비용은 더 높았습니다. 그러나 모든 결과물에서 캐릭터와 이야기의 일관성, 영상 내부 동작과 음악 템포의 동기화, 그리고 생성 클립을 재평가하고 편집하는 자기 검토 능력은 부족했습니다. 특히 가사를 지나치게 문자 그대로 영상화하는 경향이 두드러졌습니다.
이번 실험은 AI가 복잡한 창작 작업을 자율적으로 수행할 수 있는 잠재력을 보여주지만, 동시에 현재 AI의 한계도 명확히 드러냈습니다. AI가 저렴한 비용으로 영상 콘텐츠를 빠르게 만들어낼 수 있다는 점은 분명 매력적입니다. 하지만 예술적 비전과 창의성, 미묘한 감정 표현, 그리고 일관된 스토리텔링 측면에서는 아직 인간 창작자의 개입이 필수적임을 시사합니다. 전문가들은 AI가 '평균적인 오락물'을 만드는 데는 능숙하지만, 진정으로 독창적이고 예술적인 가치를 지닌 작품을 만들기 위해서는 사용자가 세밀한 지시를 내리는 '도구'로서의 역할에 집중해야 한다고 강조합니다. 앞으로 AI 기술이 발전하면서 이러한 한계를 극복하고 더욱 정교하고 창의적인 결과물을 만들어낼 수 있을지 주목됩니다.