Aleph Alpha 发布开放权重德英双语 MoE 模型 Kolibri
中文摘要
Aleph Alpha 发布开源德英双语 MoE 模型 Kolibri,总参数 78B(激活 3B),支持 1M 上下文,采用 Apache 2.0 协议。
English Summary
Aleph Alpha released Kolibri, an open-weight German-English MoE model with 78B total (3B active) parameters, 1M context, and an Apache 2.0 license.
原文节选
Aleph Alpha 于德国统一日发布开放权重模型 Kolibri,为 78B 总参数、约 3B 激活的德英双语 MoE Transformer,支持最长 1M token 上下文,权重以 Apache 2.0 许可上传 Hugging Face。