AI 서비스의 실제 신뢰도를 측정하는 AIWatch가 클로드(Claude), 오픈AI(OpenAI), 제미니(Gemini) 등 주요 AI 서비스 41개에 대한 6월 신뢰도 보고서를 공개했습니다. 이 보고서는 공식 업타임 수치만으로는 알 수 없는 실제 장애 발생 빈도와 지연 문제를 파헤쳐, 프로덕션 환경에서 AI 서비스를 선택하는 데 중요한 통찰을 제공합니다.
보고서에 따르면, 6월 한 달간 41개 서비스 중 35개가 최소 한 번의 장애를 겪었으며, 총 다운타임은 712시간 26분에 달했습니다. 특히 클로드(Claude)는 공식 업타임 99.55%를 기록했지만, AIWatch의 자체 측정 결과 45건의 인시던트가 발생하여 'Fair(보통)' 등급인 67점을 받았습니다. 이는 장애가 없었던 윈드서프(Windsurf)의 100점, 모달(Modal)의 94점과 대비됩니다. AIWatch는 제공업체가 발표하는 업타임 수치를 그대로 인용하지 않고, 공식 인시던트 기록과 직접 프로브(probe) 측정을 통해 실제 신뢰도를 계산합니다. 또한, 공식 상태 페이지에 보고되지 않는 지연 문제도 포착했는데, 6월에 발생한 102건의 지연 악화 중 99건이 공식 페이지에 없었으며, 미스트랄(Mistral)과 리플리케이트(Replicate)에서 두드러졌습니다.
이 보고서는 AI 서비스를 실제 제품에 통합하려는 개발자나 기업에게 매우 중요한 정보입니다. 단순히 업타임 퍼센티지만으로는 서비스의 안정성을 온전히 판단하기 어렵다는 점을 명확히 보여주기 때문입니다. 잦은 인시던트나 예측 불가능한 지연은 사용자 경험을 저해하고 비즈니스 운영에 직접적인 영향을 미칠 수 있습니다. AIWatch Score는 업타임(40%), 인시던트 영향일(25%), 복구 속도(15%), 응답성(20%)을 종합하여 '프로덕션에서 무엇을 믿고 쓸 수 있는가'에 대한 실질적인 답을 제공하며, 서비스 선택의 중요한 기준으로 활용될 수 있습니다.