DeepSeek,“机圈”的下一个起点?

毫不意外地,DeepSeek的火烧到了硬件行业。

自2月5日华为宣布“小艺智能体”接入DeepSeek-R1算起,在一周多的时间里,包括星纪魅族、荣耀、OPPO、努比亚、vivo在内的6家手机厂商宣布接入DeepSeek。

仅从功能实现来看,各手机品牌基于DeepSeek-R1模型所提供的能力大差不大,多集中于“联网搜索”、“文案生成”、“AI问答”等。本质上,这种API调用的接入方式基本相当于增加一个在线插件。

某种意义上,这也算是智能手机行业中长久以来形成的默契,即信奉短板理论,绝不让“人有我无”的情况发生。

而除了从众效应外,也有多位从业者向虎嗅表示了他们对DeepSeek的看好,其中也包括智能手机与前者的深度绑定——将DeepSeek完成本地部署。

这背后其实反映了两个问题:为什么智能手机需要一个在端侧部署的模型?还有就是端侧模型何时才能“好用”?

01掌上的DeepSeek,会是个好选择吗?

实际上,虽然各手机厂商只是接入DeepSeek作为“扩展应用”,但其中也不乏有公司开始了本地化部署的验证工作,只是受限于模型尺寸与手机性能之间的矛盾,现阶段DeepSeek的小尺寸模型在端侧的表现并不理想。

这里需要解释下,在满血版DeepSeek-R1模型中,其参数达到670B,如果在本地运行,至少需要占用960Gb的内存空间,任何一种移动设备都无法满足这样的硬件配置需要。

目前DeepSeek蒸馏版本(1.5B、7B)尚可符合手机端的使用条件,比如1.5B参数版本在本地运行时,大概占用1Gb的内存,基本不会对系统流畅度和续航造成太大影响。

而在实际测试中,1.5B版本的DeepSeek无论是精度还是幻觉率都较满血版大幅下滑。

星纪魅族副总裁王炼向笔者表示,在实际测试中,DeepSeek的小尺寸模型能力还在“不断进化中”,不过在一些垂直领域,比如数学领域表现得较好。

造成这一问题的,除了模型参数导致的性能降低外,还有一个重要原因可能是端侧本就不是DeepSeek这类开源模型公司的核心赛道。

《业务驱动的推荐系统:方法与实践》作者、Shopee新加坡资深算法专家傅聪向笔者表示,开源大模型公司在模型发布后,后续都会更新一系列从大到小的蒸馏版本,算是行业惯例,一方面他们想打造生态,另一方面也是调动社会层面的协作,而对于学术机构来说,他们能动用的算力去跑一遍1.5B左右参数的模型,算是能承受的极限了。

“比如手中有十几块、几十块A100芯片,然后把1.5B的模型从0到1复现一下,把V3这个架构实践一遍,可能也需要训练三天左右的时间,这对于一般研究机构来说,算是成本较高的了”,傅聪解释道。

除去这重考量外,现在还难说DeepSeek未来会对小尺寸模型做哪些针对性的算法优化。

那么为什么手机厂商还会去探寻端侧部署的方法呢?一个重要的原因是,从用户隐私保护的角度来说,端侧模型是最优解。

前不久,云安全公司Wiz曾发布一项研究结果,表明DeepSeek数据库存在安全隐患,允许对数据库操作进行完全控制,包括访问系统日志、用户聊天提示,甚至用户的 API 身份验证令牌。

针对数据安全,有一种解决方案是将数据做向量化加密。

王炼向笔者提到,在Flyme AIOS系统中,有些功能应用无法通过本地算力解决,必须将数据上传到星魅云端,而涉及这部分数据时,首先会将用户的隐私数据筛查出去,然后再将数据做向量化加密上传,这些数据在云端也无法被解密。

而另外一种更加彻底的解决方案就是将大模型做本地化部署,从根源上减少对云端算力的依赖。

除此之外,DeepSeek对模糊意图的理解能力,也是手机厂商所看重的。

“DeepSeek在深度思考上的能力相较其他模型更具优势,在与星魅的Flyme大模型结合后,能够充分理解用户的意图,帮助用户去做一些更加精准的决策和执行,而不是让用户自己去分析,他应该在什么时候、什么地点、什么步骤上使用什么能力去解决问题”,王炼解释道。

当然,就目前来看,除了意图理解和某些特定领域外,在端侧部署小尺寸的Deepseek模型,性能比较有限,那端侧模型何时才能落地呢?

02“精品小模型”,呼之欲出?

正如上文所提到的,手机、PC等移动终端在硬件配置上,基本卡死了大模型端侧部署的可能。

而在参数量较小的模型中,7-13B这个级别里,部分模型如智谱GLM4-9B在精度和幻觉上均已展现出不错的成效。

同时也有迹象表明,小模型可能会即将诞生一个“Aha Moment”。

傅聪提到,“业内有一些动手能力特别强的工程师,他们基于DeepSeek的技术报告做了些尝试,去复现小模型,比如在Llama7B、Llama38B上做强化学习引导,在很多轮后也得到了接近于可以多步思考的小推理模型,同时幻觉被大大减少。”

另外,仅就DeepSeek来说,如果将其用于端侧部署,也是个不错的技术选型。

“DeepSeek-V3的参数是6700亿,但推理的时候只会激活370亿,大概相当于总参数量的5%,如果是80亿参数的模型,相当于只需要激活4亿参数,这个框架本身就决定了它的推理成本会控制在一个很理想的范围内”,按照傅聪的推算,可能未来一年左右,行业里就会出现多个7B左右大小的“精品小模型”。

不过,这并不代表手机、PC等硬件厂商会第一时间跟进,他们还必须要考虑沉没成本。

打个比方,如果现在有厂商决定要在自家系统中做DeepSeek的本地化部署,甚至是基于DeepSeek去训练端侧模型,这其实就相当于在赌未来3-5年的技术发展方向。

“DeepSeek通过Multi-Head latent Attention(MLA)和DeepSeek MOE架构实现了底层算力高效利用以及更低成本、更出色的模型效果。但这已经不是一个典型的Transformer架构,为了适配这个架构,又为了适配硬件的底层设计,他们做了非常重的开发”,傅聪认为,对于手机厂商来说同样如此,如果押注DeepSeek,后者也需要围绕DeepSeek去做大量的生态配套。

这其实也很好地回答了,为什么过去各手机厂商高调宣布的自研大模型,普遍充满了“技术储备”的色彩,因为在行业技术路线不明确之前,以智能手机行业庞大的体量来看,谁都不敢盲目地下注。

主题测试文章,只做测试使用。发布者:广众网,转转请注明出处:https://www.zmdnky.org.cn/article/10690.html

(0)
广众网的头像广众网
上一篇 2025年2月19日 上午11:05
下一篇 2025年2月19日 上午11:05

相关推荐

  • 给特斯拉开个后门?美国交通部宣布放宽部分自动驾驶安全规定

    4月25日讯(编辑 马兰)特斯拉及其他美国汽车制造商或迎来政策利好。美国交通部周四表示,为了加快自动驾驶汽车的发展,计划免除自动驾驶汽车的部分安全要求,并放宽事故报告的规则。 美国交通部长Sean Duffy表示,政府意识到自动驾驶是一场风险极高的创新竞赛,新的政策框架将大幅削减繁琐的手续,并将行业置于统一的国家标准之下。 此前,美国在自动驾驶方面的规定依照…

    2025年4月25日
    2500
  • 第一波用DeepSeek搞钱的人,已经暴富了

    最近,DeepSeek引爆了互联网。 根据新榜数据,最近7天,DeepSeek相关的内容作品数至少在105万条,日均作品数超15万。 在铺天盖地的消息中,一场魔幻的造富运动已经成型。 打着“学会DeepSeek,年入百万很正常”的旗号,有人靠卖课6天时间里狂赚40万; 有人把DeepSeek装进鼠标、键盘里,靠着“DeepSeek键盘“的噱头,日入百万; 还…

    2025年2月13日
    5700
  • 落选“果链”,别再捧杀DeepSeek了

    DeepSeek,持续正反馈AI赛道。 2025年2月13日,文心一言宣布将于4月1日0时起全面免费,所有PC端和APP端用户均可体验文心系列最新模型,而此前只有免费使用3.5版。 随之而来的,则是舆论此起彼伏。 在苹果不选择DeepSeek作为“AI搭子”时,The Information报道,苹果考虑了多个国内的对象,与阿里巴巴的合作已取得重大进展,并明…

    2025年2月14日
    7000
  • 苹果牵手阿里巴巴,中美两大全球科技巨头或将深度捆绑

    亿欧2月11日消息,据多家媒体报道称,苹果公司已与阿里巴巴集团达成合作,双方将共同为中国市场iPhone用户开发本地化人工智能功能。 据悉,此次合作旨在通过适配中国市场的AI服务,应对苹果在中国销售持续下滑的困境,并提升iPhone的市场竞争力。 消息称,此次合作的核心内容有: 技术整合:阿里巴巴的AI模型将深度集成至iOS系统,覆盖语音交互、图像生成、个性…

    2025年2月12日
    6500
  • 也许是第一次,小米发布了一款激动人心但还无法量产的手机

    无法量产的亮银版,价格据说10万元都搞不定。

    2017年4月19日
    8310

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注

联系我们

400-800-8888

在线咨询: QQ交谈

邮件:admin@example.com

工作时间:周一至周五,9:30-18:30,节假日休息

关注微信