苹果在谷歌芯片上训练AI,打响抛弃英伟达GPU第一枪?
创始人
2024-07-30 14:35:20
0

美东时间7月29日,苹果公司发布iPhone AI的首个预览版,随后发布论文,称其人工智能模型是在谷歌的TPU(张量处理单元)上训练的。论文中介绍了为支持Apple Intelligence功能而开发的基础语言模型,包括一个设计用于在设备上高效运行的约30亿参数模型和一个基于私有云计算的云侧大模型。

苹果基础模型的建模概述苹果官方发布论文

苹果发布的论文称,他们在8192块TPU v4芯片上训练云侧AFM(Apple Foundation Model),使用4096的序列长度和4096个序列的批量大小,进行了6.3万亿token训练。端侧AFM在2048块TPU v5p芯片上进行训练。

苹果的决定表明,一些大型科技公司在人工智能训练方面可能正在寻找英伟达图形处理单元的替代品。

一些芯片行业媒体称,这是苹果打响了抛弃英伟达GPU的第一枪。

今年6月初,日本证券公司瑞穗证券估计,英伟达控制着用于训练和部署OpenAI的GPT等模型的AI芯片市场的70%至95%。一些专家将英伟达在AI芯片市场的地位描述为护城河,其旗舰AI图形处理单元GPU(例如H100)与该公司的CUDA软件相结合,使其在竞争中占据了先机。

包括谷歌、Meta、甲骨文和特斯拉在内的科技公司一直在努力构建自己的人工智能系统和产品。

心智观察所研究员潘攻愚指出,苹果宣布其Apple Foundation Model(AFM)在谷歌自主开发的Tensor处理单元(TPU)进行训练,而且还租用了谷歌的云服务。苹果在AI训练方面的权衡折射出了英伟达通用型AI加速器和谷歌的ASIC定制化AI服务体系的竞争升级。

谷歌自2015年以来一直在使用自主设计的TPU来训练和部署AI模型。不是设计通用处理器,而是将其设计为专门用于神经网络工作负载的矩阵处理器,在整个大量计算和数据传递过程中,根本不需要访问内存。

今年5月,谷歌宣布推出了人工智能(AI)数据中心芯片Trillium,据称该芯片的速度相比之前的版本提升了几乎5倍。该公司表示,这款芯片将用于开发自己的模型,包括Gemini和Imagen。

谷歌称,如果提前三年预订,最新的TPU每小时使用成本不到2美元。谷歌于2015年首次推出TPU用于内部工作负载,并于2017年向公众开放。它们现在是专为人工智能设计的最成熟的定制芯片之一。

尽管如此,谷歌仍是英伟达最大的客户之一。它使用英伟达 的GPU和自己的TPU来训练AI系统,并且还在其云端出售英伟达技术的访问权限。

"虽然英伟达目前控制着高达80%份额的高端AI芯片市场,但剩余市场份额大多被大型云服务供应商如谷歌、微软、亚马逊占据。这一次苹果采用的谷歌TPUv5虽然在通用性上较英伟达同生态位芯片逊色,但主打一个性价比,综合总成本(TCO)要低英伟达四倍,而且拿货周期短。目前谷歌TPUv5所在的市场大约有300亿美元,英伟达一直觊觎这块'肥肉',但考虑到和谷歌微妙的竞合关系,英伟达目前还不会贸然大举进入ASIC领域。"潘攻愚分析称。

Meta首席执行官马克·扎克伯格和Alphabet首席执行官桑达尔·皮查伊上周均发表评论称,他们的公司和业内其他公司可能在AI基础设施上投资过度,但他们也承认,不这样做的商业风险太高。一旦落后,将无法掌握未来10到15年最重要的技术。

相关内容

热门资讯

墨西哥拟提前40天放暑假 世界... 墨西哥政府官员8日表示,考虑到筹备世界杯赛事及热浪来袭等因素,本学年将提前40天结束。这一决定引发舆...
涉及新兴领域等方面 市场监管总... 记者今天了解到,市场监管总局(国家标准委)批准发布402项重要国家标准及标准修改单,涉及新兴领域、生...
我国单线产能最大的大丝束碳纤维... 记者今天(5月9日)从中国石化获悉,我国单线产能最大的大丝束碳纤维生产线在内蒙古建成投产,单线设计产...
伊朗称美军打击伊朗6艘民用船 据伊朗方面9日消息,伊朗伦格港地方官员法瓦德·穆拉德扎德表示,8日晚美军战斗机在阿曼海塞卜港附近打击...
中方敦促国际社会合作应对移民问... 中国常驻联合国副代表孙磊8日在第二届国际移民审查论坛作一般性辩论发言时敦促国际社会加强团结合作,共同...
受贿数额特别巨大 江西省政协原... 记者今天(9日)从最高人民检察院获悉,江西省政协原党组成员、副主席胡幼桃涉嫌受贿一案,由国家监察委员...
涉疫邮轮荷兰公民回国后将居家隔... 荷兰政府8日宣布,“洪迪厄斯”号邮轮上的荷兰公民回国后将居家隔离6周。同时,政府决定将汉坦病毒家族中...
欧盟出台措施应对航空燃油供应紧... △欧洲航空公司飞机(资料图)当地时间8日,欧盟委员会发布指导意见称,为缓解欧洲航空燃油供应紧张状况,...
厄尔尼诺将带来史上最热夏天?中... 近日,部分自媒体利用国家气候中心发布的2026年主汛期(6月至8月)气候趋势预测的部分结论,指出20...
探访浏阳烟花厂爆炸事故现场:工... 5月4日16时40分许,湖南长沙浏阳市华盛烟花制造燃放有限公司生产车间发生爆炸事故,造成重大人员伤亡...
世卫组织:“洪迪厄斯”号邮轮疫... 世卫组织8日更新“洪迪厄斯”号邮轮疫情最新数据,截至5月8日,共报告8例病例,其中3例死亡病例。8例...
泽连斯基:乌方不会袭击红场阅兵 △泽连斯基(资料图)乌克兰总统网站8日深夜发布泽连斯基签署的总统令,表示乌方鉴于与美国方面8日会谈时...
天舟飞船为何不回收?坠海有讲究 天舟十号船箭组合体已于今天(8日)垂直转运至文昌航天发射场发射区,计划于近日择机发射。而天舟九号货运...
国务院成立湖南长沙浏阳烟花特别... 5月4日16时43分许,湖南省长沙市浏阳市华盛烟花制造燃放有限公司发生特别重大爆炸事故,截至5月8日...
一艘伊朗商船遭美国海军袭击,至... 总台记者8日获悉,伊朗地方官员表示,一艘伊朗商船当地时间7日晚在霍尔木兹海峡附近遭美国海军袭击并起火...
天舟“下班”为什么不回收而是坠... 天舟九号货运飞船昨天受控再入大气层,少量残骸落入预定安全海域。为何天舟飞船完成使命后不像神舟飞船那样...
乌官员称该国防空系统导弹短缺 ... △乌克兰空军发言人伊格纳特(资料图)当地时间5月8日,乌克兰空军发言人伊格纳特表示,受导弹供应不足影...
商务部:一季度 我国服务进出口... 2026年一季度,我国服务进出口总额18229亿元(人民币,下同),同比增长2.3%。其中,出口70...
欧盟气候监测机构:4月全球海洋... 欧盟气候监测机构哥白尼气候变化服务局8日发布的公报显示,2026年4月全球极地外海域的海洋表面温度达...
俄胜利日临时停火开始后 乌俄互... 当地时间5月8日,俄罗斯国防部发布通报称,出于人道主义考虑,为庆祝卫国战争胜利81周年,自5月8日零...