Meta推“最强开源模型”,扎克伯格称用闭源防中国行不通
创始人
2024-07-24 13:38:32
0

北京时间7月24日,Facebook母公司Meta Platforms Inc.发布了全新人工智能模型"Llama 3.1",这是该公司目前为止推出的最强大开源模型,号称能够比肩最好的闭源模型。

与此同时,Meta的CEO马克·扎克伯格发表公开信,阐述了他为何支持AI开源。

扎克伯格称其为"艺术的起点",表示Llama 3.1拥有大范围新的能力,包括改善推理以帮助处理复杂的数学问题或即时合成一整本书。

Meta公司在150多个涵盖多种语言的基准数据集上评估了性能,Llama 3.1模型在各个基准上皆有不错的表现。此外,还进行了广泛的人工评估,在真实场景中将Llama 3.1与竞争模型进行了比较。实验评估表明,Llama 3.1能够在一系列任务中与领先的基础模型相媲美,包括GPT-4、GPT-4o和Claude3.5Sonnet。

Llama 3.1 405B与其它模型多个基准的评估对比Meta官网

官方称,开发人员提高了模型对用户指令的响应能力、质量和详细指令遵循能力,同时确保高水平的安全性,使其能够跨功能扩展微调数据量。

根据Meta发布信息,Llama 3.1模型包含4050亿个参数,是近年来参数规模最大的模型之一。这些模型支持多种语言,上下文长度显著增加,达到128K,使用最先进的工具,推理能力也更强。这使得我们的最新模型能够支持高级用例,例如长篇文本摘要、多语言对话代理和编码助手。

Llama 3.1模型对比Meta官网文件

作为Meta迄今为止最大的模型,Llama 3.1从16位(BF16)量化为8位(FP8)数字,有效降低了所需的计算要求并允许模型在单个服务器节点内运行,使用超过16000个H100 GPU进行训练,这是全球迄今为止性能最强大、参数规模最大的开源模型。

该模型主要用于为Meta内部和外部开发人员的聊天机器人提供支持,具备广泛的新功能,包括改进的推理能力,帮助解决复杂的数学问题或瞬间综合整本书的文本。它还具有生成式AI功能,可以通过文本提示生成图像。

同时,扎克伯格发表公开信《Open Source AI Is the Path Forward》,阐述了"开源为何对开发者、对Meta和对世界都有好处"。

自ChatGPT爆火以来,将其开源的呼声未曾断绝。可就在ChatGPT2发布之后,OpenAI选择了闭源发展。阿里云、智谱和清华EKG、百川智能等,选择了开源,华为则出于数据隐私和商业收益考虑,盘古大模型就选择了闭源,在这场全球大模型军备赛中,有关开源发展和闭源深耕的争论不止不休。

扎克伯格公开信中提出,Llama需要发展成为一个完整的生态系统,包括工具、效率提高、芯片优化和其他集成,这是仅依靠Meta自己使用做不到的;Llama有信心在高度竞争中保持优势,而成为行业标准的道路是一代又一代地保持竞争力、高效和开放;最后,出售AI模型访问权限不是公司的商业模式。这意味着公开发布Llama不会削弱企业的收入、可持续性或投资研究的能力。

扎克伯格还指出,开源将确保全世界更多的人能够享受AI带来的好处和机会,权力不会集中在少数公司手中,并且该技术可以更均匀、更安全地应用于整个社会。

扎克伯格认为最好的策略是建立一个强大的开放生态系统,使得行业龙头公司与政府和盟友密切合作,以确保他们能够最好地利用最新进展,并在长期内实现可持续的先发优势。

关于中国,他在文中提到,"有些人认为,美国必须采用闭源,以防止中国获得这些模型",但"这是行不通的,只会让美国及其盟友处于不利地位"。

据彭博社报道,扎克伯格还补充说,认为美国在人工智能方面会领先中国数年也是不现实的。但他指出,即使是数月的小幅领先,也可以随着时间的推移"累积",让美国占据明显优势。

相关内容

热门资讯

山东多地发布公告,暂停办理户籍... 山东多地发布关于暂停办理户籍业务的通告。济南关于全市暂停办理户口、居民身份证居住证业务的公告尊敬的广...
外交部四连问!中方正告日方在台... 11月13日,外交部发言人林剑主持例行记者会。有记者问:日本首相高市早苗日前发表关于中国大陆对台湾动...
江苏省张家港市文昌阁火灾事故调... 江苏省“张家港发布”消息,张家港市文昌阁火灾事故调查组11月13日发布情况通报:11月12日,我市凤...
韩国京畿道一货车冲入市场,致2... △事故现场当地时间13日上午,韩国京畿道富川市一处市场内发生货车冲撞人群事故。据现场消防救援消息,截...
特朗普签署临时拨款法案 美政府... △美国总统特朗普(资料图)当地时间11月12日,美国总统特朗普在白宫签署了国会两院通过的一项联邦政府...
中央网信办严打一批涉学术论文买... 近期,部分网络账号违规提供学术论文买卖、代发、代投服务,严重扰乱网络秩序,污染网络生态。我办依法严惩...
国台办:公安机关悬赏征集温子渝... 国务院台办发言人陈斌华11月13日表示,台湾网红温子渝(网名“八炯”)、陈柏源(网名“闽南狼”)长期...
福建泉州公安发布悬赏通告 征集... 11月13日,福建省泉州市公安局发布悬赏通告,征集台湾网红温子渝(网名“八炯”)、陈柏源(网名“闽南...
以军继续在约旦河西岸拆除巴勒斯... △约旦河西岸(资料图)当地时间12日,以色列军车在以色列占领的巴勒斯坦约旦河西岸南部马萨费尔亚塔地区...
柬埔寨警方捣毁西港电诈窝点逮捕... 柬埔寨媒体报道,11月9日,柬打击网络诈骗委员会工作组联合西哈努克省警方对西哈努克市第四分区一栋大楼...
奇瑞凌晨致歉 安徽奇瑞汽车销售有限公司11月13日凌晨于社交平台发布关于天门山挑战测试意外情况的致歉声明:2025...
民调显示超七成英国选民对国家未... 英国11日发布的一项最新民意调查结果显示,76%的英国选民对国家未来感到悲观;约59%的人预计英国经...
台风蓝色预警!“凤凰”今天将变... 中央气象台11月13日6时继续发布台风蓝色预警:今年第26号台风“凤凰”(热带风暴级)的中心已于昨天...
非盟主席:尼日利亚北部未发生种... 当地时间12日,非洲联盟委员会主席马哈茂德·阿里·优素福在纽约联合国总部表示,尼日利亚北部没有发生种...
外国机构投资者进一步增持中国股... 瑞银投资银行近日发布报告称,今年三季度,外国机构投资者进一步增持中国股票。全球前40大投资机构的中国...
监管新规拟严控基金风格漂移:命... 公募基金的主题投资风格漂移问题将被进一步规范。澎湃新闻记者获悉,近日,中国证券投资基金业协会起草了《...
王楚钦晋级全运会乒乓球男单八强 第十五届全运会乒乓球男单1/8决赛,北京队王楚钦4-3战胜香港队黄镇廷,成功晋级男单八强,下轮将对阵...
台风“凤凰”在台湾屏东县恒春镇... 今年第26号台风“凤凰”(热带风暴级)已于今天(12日)19点50分前后在台湾屏东县恒春镇沿海登陆,...
“南朝四百八十寺之一”张家港永... 11月12日,苏州张家港市凤凰镇永庆寺突发大火。网传视频显示,有建筑被大火吞噬,升起浓浓黑烟。张家港...
离婚证背面有“囍”字引发热议,... 11月12日,“离婚证后面有囍字”话题冲上热搜,引发热烈讨论。视频中,有网友手持离婚证,在灯光下轻轻...