Kimi가 2.8조 파라미터, 네이티브 비전, 그리고 100만 토큰 컨텍스트를 갖춘 대규모 언어모델(LLM) 'Kimi K3'를 공개하며 개방형 인공지능(AI) 분야의 새로운 지평을 열었습니다. 이는 세계 최초의 3조(3T)급 공개 모델로, 장시간이 소요되는 코딩, 지식 작업, 복잡한 추론 등 전문적인 작업을 최소한의 사람 개입으로 수행할 수 있도록 설계되었습니다. Kimi K3는 Kimi Delta Attention(KDA)과 Attention Residuals(AttnRes), 그리고 896개 전문가 중 16개만 활성화하는 Stable LatentMoE 구조를 적용해 Kimi K2 대비 전체 스케일링 효율을 약 2.5배 높였습니다. 현재 Kimi.com, Kimi Work, Kimi Code, Kimi API를 통해 즉시 사용 가능하며, 전체 모델 가중치는 2026년 7월 27일까지 공개될 예정입니다.
Kimi K3는 GPU 커널 최적화, 컴파일러 개발, 3D 게임 제작, 칩 설계, 과학 연구 등 다양한 고난도 작업에서 인상적인 자율성을 보여주었습니다. 예를 들어, GPU 커널 최적화 작업에서는 15시간 동안 반복 작업을 통해 순전파 및 역전파 시간을 283.6ms에서 114.4ms로 단축했으며, 칩 설계에서는 48시간 연속 자율 작업으로 4mm² 면적에 100MHz 타이밍을 충족하는 칩을 설계했습니다. 계산 천체물리학 연구에서는 숙련 연구자에게 1~2주가 걸리는 작업을 약 2시간 만에 완료하며 3,000줄 이상의 파이썬(Python) 코드와 인터랙티브 대시보드를 생성하기도 했습니다. 종합 성능은 클로드 페이블 5(Claude Fable 5)나 GPT 5.6 솔(GPT 5.6 Sol)에 미치지 못하지만, 자체 평가 전반에서 다른 비교 모델들을 일관되게 앞서며 프론티어급 결과를 기록했습니다.
Kimi K3의 출시는 대규모 언어모델(LLM)의 접근성과 활용 가능성을 크게 확장한다는 점에서 의미가 큽니다. 특히 고성능 모델의 가중치를 공개하겠다는 계획은 오픈소스(open-source) AI 생태계에 활력을 불어넣고, 연구자와 개발자들이 더욱 혁신적인 애플리케이션을 구축할 수 있는 기반을 제공할 것입니다. 장시간 복잡한 작업을 자율적으로 수행하는 능력은 소프트웨어 개발, 과학 연구, 콘텐츠 제작 등 다양한 전문 분야에서 생산성을 혁신하고 새로운 형태의 자동화를 가능하게 할 잠재력을 가지고 있습니다. 이는 폐쇄형 모델이 주도하는 현재 시장에서 개방형 AI의 경쟁력을 강화하고, AI 기술의 민주화를 가속화하는 중요한 전환점이 될 수 있습니다.