NaiveAI开源3090亿参数混合专家模型: NaiveAI 已根据 MIT 许可证发布 Naive-N0.5-Flash。这款 3090 亿参数的混合专家（MoE）模型具有 155 亿个激活参数和原生 100 万 token 的上下文窗口。该模型基于...

来源简报

NaiveAI开源3090亿参数混合专家模型: NaiveAI 已根据 MIT 许可证发布 Naive-N0.5-Flash。这款 3090 亿参数的混合专家（MoE）模型具有 155 亿个激活参数和原生 100 万 token 的上下文窗口。该模型基于 MiMo-V2.5 构建，无需全注意力层，专为编码和 AI 研究而设计。