Meta推“最强开源模型”,扎克伯格称用闭源防中国行不通
创始人
2024-07-24 13:38:32
0

北京时间7月24日,Facebook母公司Meta Platforms Inc.发布了全新人工智能模型"Llama 3.1",这是该公司目前为止推出的最强大开源模型,号称能够比肩最好的闭源模型。

与此同时,Meta的CEO马克·扎克伯格发表公开信,阐述了他为何支持AI开源。

扎克伯格称其为"艺术的起点",表示Llama 3.1拥有大范围新的能力,包括改善推理以帮助处理复杂的数学问题或即时合成一整本书。

Meta公司在150多个涵盖多种语言的基准数据集上评估了性能,Llama 3.1模型在各个基准上皆有不错的表现。此外,还进行了广泛的人工评估,在真实场景中将Llama 3.1与竞争模型进行了比较。实验评估表明,Llama 3.1能够在一系列任务中与领先的基础模型相媲美,包括GPT-4、GPT-4o和Claude3.5Sonnet。

Llama 3.1 405B与其它模型多个基准的评估对比Meta官网

官方称,开发人员提高了模型对用户指令的响应能力、质量和详细指令遵循能力,同时确保高水平的安全性,使其能够跨功能扩展微调数据量。

根据Meta发布信息,Llama 3.1模型包含4050亿个参数,是近年来参数规模最大的模型之一。这些模型支持多种语言,上下文长度显著增加,达到128K,使用最先进的工具,推理能力也更强。这使得我们的最新模型能够支持高级用例,例如长篇文本摘要、多语言对话代理和编码助手。

Llama 3.1模型对比Meta官网文件

作为Meta迄今为止最大的模型,Llama 3.1从16位(BF16)量化为8位(FP8)数字,有效降低了所需的计算要求并允许模型在单个服务器节点内运行,使用超过16000个H100 GPU进行训练,这是全球迄今为止性能最强大、参数规模最大的开源模型。

该模型主要用于为Meta内部和外部开发人员的聊天机器人提供支持,具备广泛的新功能,包括改进的推理能力,帮助解决复杂的数学问题或瞬间综合整本书的文本。它还具有生成式AI功能,可以通过文本提示生成图像。

同时,扎克伯格发表公开信《Open Source AI Is the Path Forward》,阐述了"开源为何对开发者、对Meta和对世界都有好处"。

自ChatGPT爆火以来,将其开源的呼声未曾断绝。可就在ChatGPT2发布之后,OpenAI选择了闭源发展。阿里云、智谱和清华EKG、百川智能等,选择了开源,华为则出于数据隐私和商业收益考虑,盘古大模型就选择了闭源,在这场全球大模型军备赛中,有关开源发展和闭源深耕的争论不止不休。

扎克伯格公开信中提出,Llama需要发展成为一个完整的生态系统,包括工具、效率提高、芯片优化和其他集成,这是仅依靠Meta自己使用做不到的;Llama有信心在高度竞争中保持优势,而成为行业标准的道路是一代又一代地保持竞争力、高效和开放;最后,出售AI模型访问权限不是公司的商业模式。这意味着公开发布Llama不会削弱企业的收入、可持续性或投资研究的能力。

扎克伯格还指出,开源将确保全世界更多的人能够享受AI带来的好处和机会,权力不会集中在少数公司手中,并且该技术可以更均匀、更安全地应用于整个社会。

扎克伯格认为最好的策略是建立一个强大的开放生态系统,使得行业龙头公司与政府和盟友密切合作,以确保他们能够最好地利用最新进展,并在长期内实现可持续的先发优势。

关于中国,他在文中提到,"有些人认为,美国必须采用闭源,以防止中国获得这些模型",但"这是行不通的,只会让美国及其盟友处于不利地位"。

据彭博社报道,扎克伯格还补充说,认为美国在人工智能方面会领先中国数年也是不现实的。但他指出,即使是数月的小幅领先,也可以随着时间的推移"累积",让美国占据明显优势。

相关内容

热门资讯

伊朗称美军打击伊朗6艘民用船 据伊朗方面9日消息,伊朗伦格港地方官员法瓦德·穆拉德扎德表示,8日晚美军战斗机在阿曼海塞卜港附近打击...
中方敦促国际社会合作应对移民问... 中国常驻联合国副代表孙磊8日在第二届国际移民审查论坛作一般性辩论发言时敦促国际社会加强团结合作,共同...
受贿数额特别巨大 江西省政协原... 记者今天(9日)从最高人民检察院获悉,江西省政协原党组成员、副主席胡幼桃涉嫌受贿一案,由国家监察委员...
涉疫邮轮荷兰公民回国后将居家隔... 荷兰政府8日宣布,“洪迪厄斯”号邮轮上的荷兰公民回国后将居家隔离6周。同时,政府决定将汉坦病毒家族中...
欧盟出台措施应对航空燃油供应紧... △欧洲航空公司飞机(资料图)当地时间8日,欧盟委员会发布指导意见称,为缓解欧洲航空燃油供应紧张状况,...
厄尔尼诺将带来史上最热夏天?中... 近日,部分自媒体利用国家气候中心发布的2026年主汛期(6月至8月)气候趋势预测的部分结论,指出20...
探访浏阳烟花厂爆炸事故现场:工... 5月4日16时40分许,湖南长沙浏阳市华盛烟花制造燃放有限公司生产车间发生爆炸事故,造成重大人员伤亡...
世卫组织:“洪迪厄斯”号邮轮疫... 世卫组织8日更新“洪迪厄斯”号邮轮疫情最新数据,截至5月8日,共报告8例病例,其中3例死亡病例。8例...
泽连斯基:乌方不会袭击红场阅兵 △泽连斯基(资料图)乌克兰总统网站8日深夜发布泽连斯基签署的总统令,表示乌方鉴于与美国方面8日会谈时...
天舟飞船为何不回收?坠海有讲究 天舟十号船箭组合体已于今天(8日)垂直转运至文昌航天发射场发射区,计划于近日择机发射。而天舟九号货运...
国务院成立湖南长沙浏阳烟花特别... 5月4日16时43分许,湖南省长沙市浏阳市华盛烟花制造燃放有限公司发生特别重大爆炸事故,截至5月8日...
一艘伊朗商船遭美国海军袭击,至... 总台记者8日获悉,伊朗地方官员表示,一艘伊朗商船当地时间7日晚在霍尔木兹海峡附近遭美国海军袭击并起火...
天舟“下班”为什么不回收而是坠... 天舟九号货运飞船昨天受控再入大气层,少量残骸落入预定安全海域。为何天舟飞船完成使命后不像神舟飞船那样...
乌官员称该国防空系统导弹短缺 ... △乌克兰空军发言人伊格纳特(资料图)当地时间5月8日,乌克兰空军发言人伊格纳特表示,受导弹供应不足影...
商务部:一季度 我国服务进出口... 2026年一季度,我国服务进出口总额18229亿元(人民币,下同),同比增长2.3%。其中,出口70...
欧盟气候监测机构:4月全球海洋... 欧盟气候监测机构哥白尼气候变化服务局8日发布的公报显示,2026年4月全球极地外海域的海洋表面温度达...
俄胜利日临时停火开始后 乌俄互... 当地时间5月8日,俄罗斯国防部发布通报称,出于人道主义考虑,为庆祝卫国战争胜利81周年,自5月8日零...
日本近期发生疑似熊袭击致死事件 据日本方面7日消息,日本近期接连发生熊袭人事件,并出现疑似熊袭击致人死亡事件。消息称,7日,在岩手县...
美官员称美国务院正在审查所有墨... △美国国务院(资料图)据美国方面7日消息,一名美国官员说,美国国务院正在对全部53个墨西哥驻美领事馆...
北方多地风力8至10级 空气湿... 近日,我国北方部分地区轮番出现大风天气过程,从东北地区南部至黄淮大风呼啸,局地风力达到8至10级。气...