苹果研发AI模型压缩技术:把270亿参数大模型装进iPhone
来源:凤凰网 2 小时前

快科技7月15日消息,据媒体报道,苹果正与硅谷初创公司PrismML进行早期洽谈,后者宣称能将大型AI模型压缩至可在iPhone上本地运行。若技术验证成功,此举将强化苹果的隐私主张,并为其进展缓慢的Siri升级提供关键支撑。

PrismML首席执行官表示,苹果已开始评估其技术。洽谈尚处于早期阶段,前景虽不明朗,但“进展顺利”。

消息发布正值苹果推出iOS 27公测版次日——这是苹果大幅改版Siri后首次面向公众的广泛测试,旨在与OpenAI和Anthropic的AI助手展开竞争。

对苹果而言,将更多AI运算留在设备本地,意味着更低响应延迟、更少云计算成本,以及无需联网即可使用部分功能的能力——这与苹果的核心隐私定位高度契合。

PrismML的公开发布,为普通用户和投资者提供了在实验室之外检验其技术声明的机会。Counterpoint分析师Pathak总结道:

“云端与设备端AI的组合,能够提供更完整、更高效、更注重隐私的AI体验——复杂任务交由云端处理,敏感、时延敏感及隐私相关的任务则在设备端执行。”

PrismML孵化自加州理工学院研究团队,并获得Khosla Ventures支持。该公司于周二公开发布了阿里巴巴开源模型Qwen的压缩版,将原始模型从约54GB压缩至不足4GB,使其全部270亿参数可在iPhone 15及更新机型上直接运行。

目前,PrismML已免费发布两个压缩版本,兼容iPhone、MacBook及搭载英伟达芯片的PC。公司表示,下一个压缩目标是谷歌的开源模型Gemma,随后还将处理需数据中心硬件才能运行的更大规模前沿模型。

PrismML表示,其压缩方案可将原本需8块GPU运行的云端模型缩减至仅需1块,并让原本依赖服务器的模型迁移至手机和笔记本电脑。这虽能降低单一AI任务所需的内存或算力,但不必然导致整体芯片需求下降。

简体中文 English