手机里塞大模型，只是开始

原文来源：光子星球

图片来源：由无界 AI生成

急需找到新飞轮的手机厂商，盯上了大模型。

华为在8月初的开发者大会上宣布将在 HarmonyOS 4中搭载的AI助手小艺接入大模型，并在8月底邀测；小米也差不多同一时间开启了其AI助手小爱接入大模型的邀测。OPPO与vivo紧随其后，两者均在11月开始手机大模型的落地尝试。

“将大模型塞进手机”于业界并不是新鲜事儿，不谈自10月中旬开始密集预热的vivo，荣米O三家均曾在今年召开的发布会上透出过相关消息。业界普遍看法是智能手机赛道的硬件部分几乎卷无可卷，而大多跑在云端的大模型恰是一个游离于硬件之外的变量。

需要注意的是，端侧部署对大模型赛道而言同样也是行业趋势。以ChatGPT为例，作为云侧大模型的典型代表，其训练与推理都跑在微软的Azure上，用户则通过浏览器或App获取结果。input-output来回之间，不仅存在影响使用体验的时延，耗能、算力等云端成本也居高不下。

从实际场景与需求来看，不少需求完全可以通过边缘设备来满足，尤其是手机、PC、新能源车等广泛应用的终端。

于是，大模型的端侧部署逐渐成为共识，不仅有手机厂商铆足了劲训练模型，PC赛道联想与芯片赛道的高通等均在前段时间发布了端侧AI的相关解决方案。尤其是刚刚发布的高通骁龙8 Gen3以及联发科天玑9300，其AI性能的提升可以说是手机端大模型的基础。

行业需求与硬件条件都已被满足，大模型终于可以进入手机之内。可令人颇为意外的是，率先掏出“完整产品”的手机厂商竟是vivo。

vivo大模型成色如何？

11月1日，vivo召开开发者大会，于会上发布了自研大模型矩阵"蓝心"（BlueLM），包含十亿、百亿、千亿等不同参数规模。同时还发布了适配其大模型的自研操作系统OriginOS 4。

面对大模型这块“应许之地”，vivo的急切几乎写在脸上。

据10月26日市场调研机构Canalys公布的最新数据，vivo出货量出货量下滑，排名也出现下跌。vivo迫切需要大模型以及OriginOS 4来扭转局势，率先下场“开卷”并不让人意外。

而且与大模型相比，本次vivo推出的OriginOS 4的更新跨度略显寡淡。在公域讨论中，不仅其虚拟显卡、异构计算空间与轻量化等迭代幅度不及预期，vivo用户中声量颇高的原子通知等模块也没有升级。也就是说，大模型才是本次发布会的主角。

从业务模式看，vivo本次发布会展示的路线与此前业内其他玩家相似，以人工智能助手为载体，采取端侧+云侧混合的部署方式，其中作为重头戏的端侧大模型，呈现本地化、轻量化的明显特征。

这么做的目的显而易见，手机这一方小天地所提供的功耗、算力与机房不可同日而语。只是如何将模型能力与手机深度结合成为手机厂商们迫切需要突破的“konw how”。

对此，vivo给出的解决方案是推出多参数规格模型，其中主要面向文本场景的10亿规格与面向自然对话、知识问答长焦的70亿规格为端侧部署的重头戏。在官方介绍中，10亿规格单独面向端侧，70亿规格设为端云两用，自700亿起均为云端部署，这也体现了vivo在端云协同上“让上帝的归上帝，让凯撒的归凯撒”的矩阵思路。

这与谷歌在今年5月的 I/O 开发者大会如出一辙，当时谷歌发布的大模型 PaLM2 有四个参数规格，其中小参数模型可在离线状态下实现每秒处理20 tokens，适配于终端的离线使用。

如果就此认为vivo是“拾人牙慧”则未免过于严苛。实际上，vivo早在2017年便着手组建内部人工智能团队，时至今日，vivo人工智能研究院已有过千研究人员。

纵使其技术沉淀总体上不如阿里、百度等第一梯队，但开源社区的存在也让稍晚入场的玩家们能迅速赶上大部队。而vivo在2018年成立的知识图谱研究院也能在一定程度上补强其作为手机厂商可能遭遇的训练数据不足问题。

至于模型能力方面，vivo在预热时期便交出了一份不错的答卷。据悉，BlueLM在中文大模型第三方测评集C-Eval中获得了“受限访问模型”类目的第一名。其官方通告中称BlueLM是行业内首家7B端侧大模型。

但是在测评中斩获高分却实际表现不如人意的模型不在少数，更是有业内人士称这份榜单已经在过去一段时间被“刷脱皮”了，只能代表模型“做题”的能力而无法体现推理、安全、应变等能力。照此来看，vivo的业务成果显然还需要更多实际检验。

况且，vivo目前展示的云端模型能力如文生图、交互等并未跳出大模型赛道窠臼，新意有限。而且其作为重头戏的端侧模型能力还停留在测试阶段，同时端侧能力的展现也必然受到手机硬件的限制。