독일의 인공지능(AI) 스타트업 알레프 알파(Aleph Alpha)가 독일어와 영어를 동시에 지원하는 대규모 언어모델(LLM) '콜리브리(Kolibri)'를 출시하며 유럽의 '주권 AI(Sovereign AI)' 비전을 현실화하고 있습니다. 총 780억 개의 매개변수(parameter)를 가진 혼합 전문가(Mixture of Experts, MoE) 모델인 콜리브리는 각 토큰(token) 처리 시 약 35억 개의 매개변수만 활용하여 효율성을 높였습니다. 2026년 10월 3일 아파치 2.0 라이선스(Apache 2.0 license)로 공개된 이 모델은 독일과 핀란드 인프라에서 처음부터 학습되었으며, 유럽연합(EU)의 AI 법(EU AI Act)을 염두에 두고 개발되었다는 점에서 주목받고 있습니다.
콜리브리는 '주권 AI'라는 개념을 두 가지 측면에서 구현합니다. 첫째, 모델 개발팀이 독일인으로 구성되어 독일과 핀란드의 인프라에서 유럽 및 독일 법률에 따라 학습되었으며, 외국 통제로부터 자유롭습니다. 둘째, 고객은 모델 배포 및 지적 재산권(IP) 보호에 대한 완전한 자유를 보장받아, 자체 서버에 모델을 구축하고 데이터를 외부로 유출하지 않으면서도 규제 준수를 내재화할 수 있습니다. 이는 정부 기관이나 기업이 민감한 데이터를 다루는 데 있어 보안과 규제 준수를 최우선으로 고려할 수 있게 합니다. 또한, 콜리브리는 262,144 토큰의 긴 컨텍스트(context)를 지원하며, 768개의 엔비디아 B200 GPU(NVIDIA B200 GPU)로 24조 개 이상의 토큰을 학습했습니다.
콜리브리의 핵심 기술 중 하나는 혼합 전문가(MoE) 아키텍처입니다. 이 모델은 50개의 레이어(layer)에 각각 384개의 전문가(expert)와 1개의 공유 전문가를 두어, 각 토큰이 384개의 전문가 중 6개만을 거치도록 설계되었습니다. 이를 통해 780억 개의 전체 매개변수 중 약 35억 개만 실제 연산에 사용되어 효율성을 극대화합니다. 또한, 독일어의 긴 복합어 특성을 고려한 독자적인 토크나이저(tokenizer)인 유니BPE(UniBPE)를 개발하여, GPT-5의 토크나이저보다 독일어 텍스트 처리 시 11.2% 적은 토큰을 사용합니다. 이는 독일어 처리의 정확성과 효율성을 높여 독일 시장에서의 경쟁력을 강화하는 중요한 요소입니다.
콜리브리의 출시는 '규제는 혁신을 저해한다'는 통념에 도전하며, 혁신과 규제 사이의 균형점을 찾으려는 유럽의 노력을 상징합니다. 특히 데이터 주권과 개인 정보 보호를 중시하는 유럽의 가치를 AI 개발에 적극적으로 반영했다는 점에서 의미가 큽니다. 이는 AI 기술이 단순히 성능 경쟁을 넘어, 사회적 가치와 윤리적 기준을 어떻게 통합할 수 있는지 보여주는 중요한 사례가 될 것입니다. 앞으로 콜리브리와 같은 '주권 AI' 모델이 전 세계 AI 시장에 어떤 파급 효과를 가져올지 주목됩니다.
