抛弃8GB内存,端侧AI大模型加速内存升级

科技确有核芯 2024-11-06 21:30:49
电子发烧友网报道(文/黄晶晶)端侧AI大模型的到来在存储市场产生了最直接的反应。年初在我们对旗舰智能手机的存储容量统计中,16GB内存+512GB存储成为几乎所有旗舰机型都提供的选择。毕竟AI大模型的运行以及相关应用的激增都比较吃内存和闪存。就在最近,连苹果也开始淘汰8GB版本,逐步走向12GB、16GB内存。智能终端对存储容量的需求有增无减,同时也加速更先进存储规格的采用。 苹果、小米纷纷砍掉8GB内存版本日前,苹果宣布搭载M2和M3芯片的MacBook Air机型现标配16GB内存,相比此前翻倍,但起售价维持不变,分别仍为7999元和8999元。苹果官网上13英寸M2 MacBook Air、13英寸M3 MacBook Air以及15英寸M3 MacBook Air均淘汰了8GB版本,标配16GB内存,固态硬盘是256GB起步。截至目前,苹果新款MacBook Pro、Mac mini、iMac等设备全部都是16GB内存起步。 近期,小米公司宣布了其旗舰产品小米15系列的内存配置重要调整。小米董事长兼CEO雷军表示,小米15将砍掉8GB内存版本,标准版将从12GB起步。 雷军表示,为了最大程度展现端侧 AI的能力,我们决定取消 8GB 版本。小米15系列,在设计工艺、性能功耗、续航表现和使用体验等方方面面都有巨大的提升。 10月28日,小米中国区市场部副总经理、Redmi品牌总经理王腾在社交平台上解释称,这一决策(指取消8GB内存,从12GB起步)主要是基于未来手机AI应用的发展趋势。随着端侧AI大模型对内存需求的增加,8GB内存已逐渐无法满足高效运行的需求。他建议,在资金允许的情况下,消费者应选择更大内存的版本,以确保手机能够流畅运行各类AI应用。 另外,对于小米15系列的涨价,雷军表示,去年我跟大家说过,小米14首定是最后一次定价3999元。今年3nm工艺升级,同时供应链 RAM 和 ROM 成本涨幅很大,我们在研发上投入也非常大,小米15 确实需要涨价。我可以保证,即便涨价,小米15 依旧日物超所值!相比往代同内存版本的涨价幅度,也肯定让大家觉得“贵得有理由”,谢谢大家理解! 端侧AI大模型的内存容量由于端侧AI大模型需要在内存中加载,即便采用压缩技术,越大的模型越吃容量。一方面现在端侧AI大模型有着轻量化的趋势,另一方面足够大容量和性能更高的内存更能满足端侧AI的需求。 今年6月苹果发布Apple Intelligence,将强大的生成模型置于 iPhone、iPad 和 Mac 的核心。它具有的数据处理和情境感知能力。它能够深入理解设备中的各类数据,包括照片、邮件、信息等,并据此为用户提供个性化的智能服务。分析师郭明錤曾表示,Apple Intelligence采用端侧3B LLM,经过压缩后,随时需要预留约0.7-1.5GB DRAM来运作Apple Intelligence的端侧LLM。 在安卓阵营,早在去年,端侧AI便成为各大手机终端厂商进行手机创新的主航道,彼时大家都将AI端侧大模型的参数集中于7B。然而参数越大所需的处理器、存储等资源越多,轻量化小模型或许更适合于智能终端。 vivo继去年带来了三款端侧大模型(自研十亿、百亿、千亿三个参数量级)之后,发布全新30亿参数量级的蓝心端侧大模型3B。 在对话写作、摘要总结、信息抽取等能力上,蓝心3B可以越级比肩行业7B-9B模型。相比蓝心7B,蓝心 3B极致性能提升300%,平衡模式下功耗优化达46%,极致出词速度可以达到80字/s,系统功耗仅450mA,内存占用仅1.4GB。蓝心端侧大模型3B真正打破了模型小、能力强、消耗低的“不可能三角定律”。 苹果为了支持Apple Intelligence在手机端的应用,将iPhone 16系列的四款机型全部升级到了8GB内存。为何选定为8GB内存,而不是更高?苹果硬件技术高级副总裁Johny Srouji表示,Apple Intelligence是促使使用8GB内存的一个主要原因。他还提到,软硬件和产品的完全集成带来了很多好处,苹果软件团队经过多次的内存优化计算,避免内存浪费,综合考虑之后认为8GB是最适合的选择。 我们看到新发布的vivo X200系列和OPPO Find X8系列等手机都是直接从12GB版本起步。安卓阵营旗舰手机的内存容量升级更加积极,苹果反而显得有点保守了。尽管苹果有其软硬件优化的系统级优势,但相信8GB内存的选择,成本也是考虑因素之一。 内存规格不断提升旗舰智能手机主要采用LPDDR5X内存规格,LPDDR5X能够更好地加速边缘AI运算,提供高存储器频宽和更佳的功耗效率。此前LPDDR5X速率达8.5Gbps,LPDDR5T速率达 9.6Gbps的水平,而最近发布的新机甚至还采用了更高速率的LPDDR5X。 例如,OPPO Find X8 系列搭载潮汐引擎×天玑 9400,采用台积电第二代3nm工艺与新一代ARM架构,搭配高速闪存UFS 4.0与LPDDR5X先进内存规格,带来更强的性能和更均衡的功耗表现。其中,Find X8 Pro采用LPDDR5X内存,Find X8 Pro 卫星通信版采用了LPDDR5X 10667Mbps版内存。在 vivo X200新机中,vivo X200 Pro 16GB + 1TB 卫星通信版本搭载LPDDR5X Ultra Pro,同样达到10667Mbps速度。 此前三星半导体就表示,已成功在联发科下一代天玑旗舰移动平台(天玑9400)完成其最快的10.7千兆比特/秒(Gbps)LPDDR5X DRAM验证。成为当今全球最快的手机内存。 至于苹果新一代新机,iPhone 16采用6400Mbps的LPDDR5,苹果iPhone 16 Pro和16 Pro Max版本都是采用的是LPDDR5X规格的内存,7500Mbps速率。 LPDDR5标准于2019年2月发布,2021年7月JEDEC组织推出了升级版LPDDR5X。为了打造更高性能更能满足端侧AI大模型运算的内存,今年以来JEDEC组织正在积极制定新一代低功耗内存LPDDR6标准,该组织设定了 LPDDR6的速度范围从 10.667Gbps到14.4Gbps。可以看到,三星10.7Gbps LPDDR5X DRAM已经初步达到了该组织拟定的LPDDR6最低速度范围要求。接下来,各大DRAM厂商势必积极跟进LPDD6的技术和产品,手机内存也将上一个新的台阶。
0 阅读:0

科技确有核芯

简介:感谢大家的关注