
IT之家 5 月 25 日音信,面壁智能汇聚清华大学、OpenBMB 开源社区,今天崇拜发布并开源其在低比特大模子本质标的的最新效果 ——BitCPM-CANN。
官方暗示,这是中国首个皆备基于国产算力平台(华为昇腾)完了端到端本质并开源的三值(1.58-bit)大模子。从量化算子、本质算法到全链路框架,BitCPM-CANN 均在华为昇腾上原生完成,包含 0.5B、1B、3B、8B 四个模子尺寸,与同尺寸 MiniCPM4 全精度家眷逐项对照评测,性能发扬优异。

比拟传统 BF16 精度,BitCPM-CANN 在推理阶段开释约 6 倍显存红利,同期将模子智力保留率守护在 90%–97.2%。

官方暗示,滚球app官方下载敌手机产业来说,6 倍的显存红利意味着,一个 8B 参数的 BitCPM-CANN 大模子,不错搪塞运转在现时主流旗舰手机之上。
此外,面壁智能基于 MindSpeed × Megatron-LM 骨干搭建了完满的低比特本质底座世界杯官方滚球app下载安卓/苹果/手机版,包含环境适配、32K 长序列撑捏、并行计谋、和会算子等完满工程体系。从此,统共面向昇腾的低比特本质职责,都可成立在归并套民众基础措施之上。
必一体育app2026世界杯中国官方下载BitCPM-CANN 0.5B / 1B / 3B / 8B 全系列模子权重现已开源,IT之家附市欢如下: ]article_adlist--> 声明:新浪网独家稿件,未经授权不容转载。 -->