Aleph Alpha 发布开源权重模型 Kolibri，助力欧洲 AI 主权

Aleph Alpha 发布了 Kolibri，这是一个德英双语模型，拥有 780 亿参数。通过 mixture-of-experts 架构，每个 token 仅激活约 30 亿参数。Aleph Alpha 声称，在德语和英语两种语言中，Kolibri 在质量与运行成本方面均处于 Pareto 前沿，相比同类架构（其中部分模型构建时间早于 2026 年 3 月或 4 月）的对比模型，它在任一指标上都表现更优。德语占训练数据的 21.3%，这一比例得益于公司为该项目专门搭建的德语数据管道。此外，中国模型也被用于生成合成训练数据。

Aleph Alpha 指出，Kolibri 主要面向公共管理、航空航天及工业领域。该模型依据欧洲法律开发，并充分考虑了欧盟 AI 法案（EU AI Act）。它支持最长 100 万 token 的上下文窗口，且训练在德国和芬兰利用 768 块 B200 GPU 完成，详见技术报告。模型权重以 Apache 2.0 许可证形式托管在Hugging Face上。