近日,工信部中国信息通信研究院(以下简称“中国信通院”)人工智能研究所公布的一份检验报告显示,上海原点星辉科学技术有限公司(下简称StartLux)研发的本地大模型 StartLux-V1.0-27B-Preview,在可信AI大模型基准测试——MCP专项测试中,以 27B 参数量取得综合性能排名第二的成绩,高于第三名的DeepSeek-V4-Flash,能力范围已经进入DeepSeek-V4-Pro所代表的万亿参数模型能力区间。
可信AI大模型基准测试——MCP 专项测试涵盖位置导航、网页搜索、浏览器自动化、金融分析、代码仓库管理、3D 设计 6 类专项任务及综合评估,共 7 项检验项目,重点考察大模型在多工具协同、复杂任务执行及真实环境交互等方面的综合表现,该专项测试部分指标和数据参考了开源项目MCP-Universe。
参测模型包括 DeepSeek-V4-Pro(1.6T)、DeepSeek-V4-Flash-0731(284B)、Step-3.7-Flash(198B)、StartLux-27B-260715(27B)、Qwen-3.6-27B(27B)和 Agent