Back to Home
RadarAI··Papers & Tech

Aleph Alpha 发布开放权重德英双语 MoE 模型 Kolibri

中文摘要

Aleph Alpha 发布开源德英双语 MoE 模型 Kolibri,总参数 78B(激活 3B),支持 1M 上下文,采用 Apache 2.0 协议。

English Summary

Aleph Alpha released Kolibri, an open-weight German-English MoE model with 78B total (3B active) parameters, 1M context, and an Apache 2.0 license.

Original Excerpt

Aleph Alpha 于德国统一日发布开放权重模型 Kolibri,为 78B 总参数、约 3B 激活的德英双语 MoE Transformer,支持最长 1M token 上下文,权重以 Apache 2.0 许可上传 Hugging Face。