模型

MiniCPM-SALA发布并开放9B权重

MiniCPM-SALA 发布并开放权重

模型架构Transformer

概述

面壁智能OpenBMB发布MiniCPM-SALA,采用稀疏注意力与线性注意力混合架构,9B参数即可支持百万token级长上下文建模,开放权重与推理代码,并提供Transformers与SGLang两种推理方式的说明。模型输入输出均为文本。需要在本地或私有环境处理超长文档、整库代码上下文的团队,可以9B模型的部署成本实测其长上下文召回与生成质量,按官方说明选择推理框架部署。