苹果在谷歌芯片上训练AI,打响抛弃英伟达GPU第一枪?
创始人
2024-07-30 14:35:20
0

美东时间7月29日,苹果公司发布iPhone AI的首个预览版,随后发布论文,称其人工智能模型是在谷歌的TPU(张量处理单元)上训练的。论文中介绍了为支持Apple Intelligence功能而开发的基础语言模型,包括一个设计用于在设备上高效运行的约30亿参数模型和一个基于私有云计算的云侧大模型。

苹果基础模型的建模概述苹果官方发布论文

苹果发布的论文称,他们在8192块TPU v4芯片上训练云侧AFM(Apple Foundation Model),使用4096的序列长度和4096个序列的批量大小,进行了6.3万亿token训练。端侧AFM在2048块TPU v5p芯片上进行训练。

苹果的决定表明,一些大型科技公司在人工智能训练方面可能正在寻找英伟达图形处理单元的替代品。

一些芯片行业媒体称,这是苹果打响了抛弃英伟达GPU的第一枪。

今年6月初,日本证券公司瑞穗证券估计,英伟达控制着用于训练和部署OpenAI的GPT等模型的AI芯片市场的70%至95%。一些专家将英伟达在AI芯片市场的地位描述为护城河,其旗舰AI图形处理单元GPU(例如H100)与该公司的CUDA软件相结合,使其在竞争中占据了先机。

包括谷歌、Meta、甲骨文和特斯拉在内的科技公司一直在努力构建自己的人工智能系统和产品。

心智观察所研究员潘攻愚指出,苹果宣布其Apple Foundation Model(AFM)在谷歌自主开发的Tensor处理单元(TPU)进行训练,而且还租用了谷歌的云服务。苹果在AI训练方面的权衡折射出了英伟达通用型AI加速器和谷歌的ASIC定制化AI服务体系的竞争升级。

谷歌自2015年以来一直在使用自主设计的TPU来训练和部署AI模型。不是设计通用处理器,而是将其设计为专门用于神经网络工作负载的矩阵处理器,在整个大量计算和数据传递过程中,根本不需要访问内存。

今年5月,谷歌宣布推出了人工智能(AI)数据中心芯片Trillium,据称该芯片的速度相比之前的版本提升了几乎5倍。该公司表示,这款芯片将用于开发自己的模型,包括Gemini和Imagen。

谷歌称,如果提前三年预订,最新的TPU每小时使用成本不到2美元。谷歌于2015年首次推出TPU用于内部工作负载,并于2017年向公众开放。它们现在是专为人工智能设计的最成熟的定制芯片之一。

尽管如此,谷歌仍是英伟达最大的客户之一。它使用英伟达 的GPU和自己的TPU来训练AI系统,并且还在其云端出售英伟达技术的访问权限。

"虽然英伟达目前控制着高达80%份额的高端AI芯片市场,但剩余市场份额大多被大型云服务供应商如谷歌、微软、亚马逊占据。这一次苹果采用的谷歌TPUv5虽然在通用性上较英伟达同生态位芯片逊色,但主打一个性价比,综合总成本(TCO)要低英伟达四倍,而且拿货周期短。目前谷歌TPUv5所在的市场大约有300亿美元,英伟达一直觊觎这块'肥肉',但考虑到和谷歌微妙的竞合关系,英伟达目前还不会贸然大举进入ASIC领域。"潘攻愚分析称。

Meta首席执行官马克·扎克伯格和Alphabet首席执行官桑达尔·皮查伊上周均发表评论称,他们的公司和业内其他公司可能在AI基础设施上投资过度,但他们也承认,不这样做的商业风险太高。一旦落后,将无法掌握未来10到15年最重要的技术。

相关内容

热门资讯

山东小伙杨瀚森发文感谢,首轮1... 北京时间6月26日,NBA选秀大会,中国球员杨瀚森在首轮第16顺位被开拓者选中。这位身高2米18的中...
伊朗宪法监护委员会批准暂停伊朗... 伊朗伊斯兰共和国广播电视台26日报道,伊朗宪法监护委员会已批准了暂停伊朗与国际原子能机构合作的法案。
依法保障对辩护人的选择权,“两... 今天,最高人民法院、最高人民检察院联合发布《关于依法保障在押犯罪嫌疑人、被告人选择辩护人权利有关问题...
泰国警方在普吉岛发现多个可疑爆... 据央视新闻消息,泰国警方26日在普吉芭东海滩销毁了一枚疑似爆炸装置。该可疑物体是在普吉岛一家酒店附近...
商务部介绍对欧盟稀土出口审批情... 6月26日下午,商务部召开例行新闻发布会,有记者就对欧盟稀土出口审批情况提问。商务部新闻发言人何亚东...
全国首艘氢电拖轮在青岛港入列 ... 6月26日,全国首艘氢电拖轮“氢电拖1”轮在山东港口青岛港正式入列。该拖轮搭载“氢燃料电池+液冷锂电...
今年高考招生录取有哪些新变化、... 这两天,各地高考分数陆续公布,进入志愿填报阶段,今年高考招生录取有什么新变化、新趋势?今年,各地高校...
特朗普公开施压,要求撤销对内塔... 美国总统特朗普当地时间25日在社交媒体上发表贴文,要求撤销对以色列总理内塔尼亚胡的审判。贴文说,他“...
小肚腩悄悄膨胀?从三餐搭配到零... 当书包里的零食越来越多,当小肚腩悄悄爬上孩子的腰间,儿童青少年肥胖问题困扰着家长。那么如何让孩子吃得...
国家发改委:已下达2025年以... 国家发展改革委政研室副主任、委新闻发言人李超26日在新闻发布会上表示,去年11月份以来,国家发展改革...
民航局:禁止旅客携带无3C标识... 日前,为切实保障航空运行安全,民航局发布紧急通知,自6月28日起禁止旅客携带没有3C标识、3C标识不...
国家发改委:第三批消费品以旧换... 据人民财讯消息,6月26日,国家发展改革委政策研究室副主任李超表示,将于今年7月份下达今年第三批消费...
有男子穿女装替考?中南大:拟开... 中南财经政法大学教务部6月25日发布:2024-2025学年第二学期期末考试违纪舞弊情况通报(五)。...
“线上诈骗+线下洗钱” 新型骗... “网约车投送现金 完成任务可返现”“高收益理财 上门收款”当你听到这些话千万当心!一种“线上诈骗+线...
《参考消息》整版关注第六届跨国... 6月26日出版的《参考消息》第10版以《跨国公司与中国续写“双向奔赴”故事——第六届跨国公司领导人青...
诊所推出“50元输液三天”“输... 今年3月,四川省成都市金牛区某诊所为做周年优惠活动在市场门口放置“50元输液三天”促销展板。该活动被...
上半年我国在口岸边境地区缴获各... 今年截至6月25日,全国移民管理机构在口岸边境地区共破获毒品案件205起,抓获犯罪嫌疑人262人,缴...
特朗普与泽连斯基,又见了 乌克兰总统泽连斯基25日在社交媒体发文说,他与美国总统特朗普当天在荷兰海牙北约峰会期间举行会晤,双方...
美国航空一客机发动机起火返航,... 当地时间6月25日,央视记者获悉,美国航空一架客机在其中一个发动机起火冒烟后返回拉斯维加斯机场,飞机...