AI 에이전트 개발사 플로이(Ploy)가 자사의 마케팅 웹사이트 구축 AI 에이전트를 오픈AI(OpenAI)의 최신 모델 GPT-5.6 솔(Sol)로 성공적으로 마이그레이션했습니다. 몇 달간 클로드 오퍼스(Claude Opus)를 능가하는 모델이 없었지만, GPT-5.6 솔은 플로이의 엄격한 평가 기준을 통과하며 작업 속도 2.2배 향상, 비용 27% 절감, 시각적 품질 개선이라는 놀라운 성과를 달성했습니다. 이는 AI 모델 선택이 실제 서비스 운영 효율성에 얼마나 큰 영향을 미치는지 보여주는 중요한 사례입니다.
플로이의 AI 에이전트는 웹페이지 기획, 코드 작성, 이미지 생성, 자체 작업 스크린샷 등 복잡한 마케팅 웹사이트 구축 전 과정을 수행합니다. GPT-5.6 솔로 전환한 결과, 완성된 빌드에 소요되는 시간은 8분에서 3분 42초로 단축되었고, 건당 비용은 3.06달러에서 2.22달러로 줄었습니다. 특히, 출력 토큰(output tokens) 사용량이 절반 수준으로 감소하여 효율성이 크게 개선되었음을 알 수 있습니다. 또한, GPT-5.6은 더 간결하고 효율적인 코드를 작성하는 경향을 보였는데, 이는 불필요한 CSS 변수를 대량 생성했던 클로드 오퍼스와 대조됩니다.
이번 마이그레이션 과정에서 플로이는 모델 간의 도구 호출(tool call) 방식 차이로 인한 문제점을 발견하고 해결했습니다. GPT-5.6은 모든 도구 매개변수(parameters)를 보내는 경향이 있어, 사용되지 않는 매개변수에 임의의 값을 채워 넣는 문제가 발생했습니다. 이는 에이전트가 빈 파일을 읽는 등의 오류로 이어졌습니다. 플로이는 이 문제를 해결하기 위해 스키마 변환(schema transform) 방식을 적용하여, 선택적 속성을 필수이면서 널(nullable) 값으로 처리하도록 변경했습니다. 이러한 최적화는 AI 에이전트가 다양한 최신 모델의 특성을 이해하고 활용하는 것이 얼마나 중요한지 보여주며, 앞으로 AI 에이전트 개발자들이 직면할 공통적인 과제와 해결 방안을 제시합니다.