苹果在谷歌芯片上训练AI,打响抛弃英伟达GPU第一枪?
创始人
2024-07-30 14:35:20
0

美东时间7月29日,苹果公司发布iPhone AI的首个预览版,随后发布论文,称其人工智能模型是在谷歌的TPU(张量处理单元)上训练的。论文中介绍了为支持Apple Intelligence功能而开发的基础语言模型,包括一个设计用于在设备上高效运行的约30亿参数模型和一个基于私有云计算的云侧大模型。

苹果基础模型的建模概述苹果官方发布论文

苹果发布的论文称,他们在8192块TPU v4芯片上训练云侧AFM(Apple Foundation Model),使用4096的序列长度和4096个序列的批量大小,进行了6.3万亿token训练。端侧AFM在2048块TPU v5p芯片上进行训练。

苹果的决定表明,一些大型科技公司在人工智能训练方面可能正在寻找英伟达图形处理单元的替代品。

一些芯片行业媒体称,这是苹果打响了抛弃英伟达GPU的第一枪。

今年6月初,日本证券公司瑞穗证券估计,英伟达控制着用于训练和部署OpenAI的GPT等模型的AI芯片市场的70%至95%。一些专家将英伟达在AI芯片市场的地位描述为护城河,其旗舰AI图形处理单元GPU(例如H100)与该公司的CUDA软件相结合,使其在竞争中占据了先机。

包括谷歌、Meta、甲骨文和特斯拉在内的科技公司一直在努力构建自己的人工智能系统和产品。

心智观察所研究员潘攻愚指出,苹果宣布其Apple Foundation Model(AFM)在谷歌自主开发的Tensor处理单元(TPU)进行训练,而且还租用了谷歌的云服务。苹果在AI训练方面的权衡折射出了英伟达通用型AI加速器和谷歌的ASIC定制化AI服务体系的竞争升级。

谷歌自2015年以来一直在使用自主设计的TPU来训练和部署AI模型。不是设计通用处理器,而是将其设计为专门用于神经网络工作负载的矩阵处理器,在整个大量计算和数据传递过程中,根本不需要访问内存。

今年5月,谷歌宣布推出了人工智能(AI)数据中心芯片Trillium,据称该芯片的速度相比之前的版本提升了几乎5倍。该公司表示,这款芯片将用于开发自己的模型,包括Gemini和Imagen。

谷歌称,如果提前三年预订,最新的TPU每小时使用成本不到2美元。谷歌于2015年首次推出TPU用于内部工作负载,并于2017年向公众开放。它们现在是专为人工智能设计的最成熟的定制芯片之一。

尽管如此,谷歌仍是英伟达最大的客户之一。它使用英伟达 的GPU和自己的TPU来训练AI系统,并且还在其云端出售英伟达技术的访问权限。

"虽然英伟达目前控制着高达80%份额的高端AI芯片市场,但剩余市场份额大多被大型云服务供应商如谷歌、微软、亚马逊占据。这一次苹果采用的谷歌TPUv5虽然在通用性上较英伟达同生态位芯片逊色,但主打一个性价比,综合总成本(TCO)要低英伟达四倍,而且拿货周期短。目前谷歌TPUv5所在的市场大约有300亿美元,英伟达一直觊觎这块'肥肉',但考虑到和谷歌微妙的竞合关系,英伟达目前还不会贸然大举进入ASIC领域。"潘攻愚分析称。

Meta首席执行官马克·扎克伯格和Alphabet首席执行官桑达尔·皮查伊上周均发表评论称,他们的公司和业内其他公司可能在AI基础设施上投资过度,但他们也承认,不这样做的商业风险太高。一旦落后,将无法掌握未来10到15年最重要的技术。

相关内容

热门资讯

交通运输部:周密应对假期后半程... 今年第21号台风“麦德姆”10月6日凌晨在广西防城港二次登陆,气象部门预计其未来会继续向西偏北方向移...
八国外长发表联合声明! 八国外长重申将共同努力立即结束加沙战争埃及、约旦、阿联酋、印度尼西亚、巴基斯坦、土耳其、沙特阿拉伯和...
索道突发故障致游客被困1小时,... 国庆正是旅游高峰期,10月5日傍晚有网友发布视频称,在湖南张家界天门山景区乘坐索道被困。有游客吐槽当...
中秋节当日预计全社会跨区域人员... 2025年10月6日,在江苏省连云港市赣榆站,旅客排队通过检票闸机准备乘车。视觉中国 图记者从交通运...
节目单来了!2025年总台中秋... 清辉盈古蜀,灯火映华夏。《中央广播电视总台2025年中秋晚会》节目单发布。晚会依托四川德阳的实景山水...
金价,再创新高! 10月6日,国际金价在亚洲交易时段延续涨势,纽商所国际黄金期货价格一度涨至3945.2美元/盎司,伦...
2025年诺贝尔生理学或医学奖... 瑞典卡罗琳斯卡学院6日宣布,将2025年诺贝尔生理学或医学奖授予,玛丽·布伦科、弗雷德·拉姆斯德尔和...
悉尼突发无差别枪击事件,枪手连... 当地时间5日晚,澳大利亚悉尼发生一起无差别枪击事件,警方在现场调查。图源:澳大利亚广播公司澳大利亚悉...
中国公民在澳徒步登山身亡,驻墨... 中国驻墨尔本总领馆6日证实,近期澳大利亚维多利亚州、塔斯马尼亚州接连发生中国公民徒步登山时意外身亡事...
鸡排哥被怼脸拍,保持尊重胜于蜂... “我是一点空气都没有了”,“鸡排哥”走红后,一些人为蹭流量“怼脸拍”。过度消费,强人所难,把原本温暖...
美国驻巴拿马大使就涉华问题散布... 今天,美国驻巴拿马大使在接受当地媒体采访时又一次就涉华问题散布谎言。为以正视听,中国驻巴拿马使馆发言...
歼-10CE为何能一战成名?总... 歼-10是我国自主研制的高性能、多用途、全天候的战斗机,自1998年3月首飞以来,它就备受瞩目。后续...
金价涨涨涨!“黄金套餐”火了! 作为国内黄金珠宝产业的重要集散地,深圳水贝黄金珠宝市场在假期迎来一轮婚庆消费热潮。广东深圳:水贝市场...
解读丨假日出行消解“充电焦虑”... 目前,国庆中秋假期已经过半,交通运输部的数据显示,自驾是今年国庆中秋假期出行的主要方式,占到了出行总...
全球首个、关键突破,国庆假期大... 这个国庆中秋假期我国多领域捷报频传,多项大国重器实现重要突破。01中国核聚变装置BEST主机全面开建...
美国军方称已调动约200名国民... 当地时间10月5日,美国五角大楼称,已按特朗普指示,将约200名联邦化的加州国民警卫队成员从洛杉矶地...
哈马斯:巴勒斯坦人民将继续抵抗... 当地时间10月5日,伊斯兰抵抗运动(哈马斯)高级官员马哈茂德·马尔达维发布消息称,自2023年10月...
金正恩参观武器装备展览会 登上... 据朝中社6日消息,朝鲜劳动党总书记、国务委员长金正恩5日参观武器装备展览会“国防发展-2025”,登...
准备观赏!今年中秋月 最圆在这... 一年又中秋,赏月正当时。俗话说“十五的月亮十六圆”,今年中秋的月亮印证了这句话,月亮最圆时刻发生在1...
“麦德姆”今夜将再次登陆,台风... 中央气象台10月5日18时发布台风橙色预警、暴雨橙色预警,7省区有大到暴雨。水利部和中国气象局10月...