全球精选|扎克伯格最新访谈:Llama 3.1是开源AI的拐点时刻,开源将成为AI的行业标准

科技   科技   2024-08-01 18:00   中国  

扫码登录【云平台

观看更多WAIC 2024精彩




近日,Meta正式发布了迄今为止最大、最强的开源大模型Llama 3.1——拥有4050亿参数,采用密集Transformer架构,具有128K的上下文窗口。Meta创始人兼CEO马克·扎克伯格还亲自撰写了一封信:开源AI是前进的道路(Open Source AI Is the Path Forward),详细阐述了开源AI对所有开发者、对Meta、对世界的意义。


与此同时,马克·扎克伯格也接受了「The Rundown AI」创始人Rowan Cheung的采访,就Llama 3.1、开源AI以及AI的未来愿景进行了深入探讨。在扎克伯格看来,Llama 3.1对开源AI来说是一个里程碑式的时刻,这个时刻意味着,Llama有机会成为开源AI的标准,而开源将成为AI的行业标准。


Rowan Cheung是AI每日通讯「The Rundown AI」的创始人,专注于提供AI和科技行业的最新动态、技术进展、行业趋势以及与科技界重要人物的采访内容,致力于让更多人了解和接触到AI技术及其影响,帮助他们跟上快速发展的技术潮流。


为了让大家更好地了解马克·扎克伯格的观点,本文结合扎克伯格在Meta官网的公开信,将他与Rowan Cheung对话的精彩内容进行重构呈现。




Llama将沿着Linux曾经走过的开源路径发展;我认为,Llama有机会成为开源AI的标准,而开源将成为AI的行业标准


开源将确保全球更多的人能够从AI的发展中获得利益和机会,权力不会集中在少数几家公司手中;开源最终将成为构建更安全、更可靠的AI途径


对于下一代平台,包括AI和AR/VR领域,Meta是站在建造开放生态系统那一边的。这不仅仅是想要构建一个封闭生态系统之外的替代品,而是希望这个行业恢复至开放生态系统实际上处于领先的状态


对于未来的AI应用图景,Meta的愿景是,应该有很多不同的AI和AI服务,而不是局限于一个单一的AI



#01

开源将成为AI的行业标准?



Rowan Cheung:马克,非常感谢你来做这次访谈。今天Meta发布了重磅AI公告,你能介绍一下发布的所有内容及其重要性吗?


马克·扎克伯格:当然,今天我们发布了拥有4050亿参数的开源模型Llama 3.1,我认为,这是迄今为止最复杂的开源模型。它实际上能与一些领先的闭源模型相媲美,在某些领域的表现甚至更胜一筹。我非常期待看到人们将如何使用它,特别是现在我们的社区政策允许人们使用Llama作为教师模型来进行微调,用来创建他们想要的任何其他模型。


除此之外,我们还将4050亿参数模型蒸馏成了更新、更领先的700亿和80亿参数模型,它们同样具有出色的性能和高性价比。

截图来源:Meet Llama 3.1


从宏观角度讲,我认为这对开源AI来说是一个里程碑式的时刻。Llama 3.1的这一时刻就像一个转折点,它将沿着Linux曾经走过的开源路径发展;我认为,Llama有机会成为开源AI的标准,而开源将成为AI的行业标准。即使它在性能上还没有超越封闭模型,但在成本效益、可定制性以及模型的微调能力等方面已经领先,这些都是开发者们将会利用的优势。我们正在专注于构建这个合作伙伴生态系统,并且围绕它构建所有这些不同的功能。


Linux曾经的开源路径:


在Linux流行之前,许多公司都拥有封闭的Unix版本。当时,还没有像开源项目那样复杂的东西。人们普遍认为,封闭的开发模式是做这种先进事情的唯一方法。


起初,Linux因成本低廉及开发者能够以各种不同方式定制而获得立足之地。随着生态系统的成熟,Linux受到了更多的审查,所以实际上变得更安全、更先进,有了更多的合作伙伴,在Linux基础上建立了更多功能,最终让它比任何闭源Unix都具有更多的功能。


Rowan Cheung:Llama 3.1的表现确实非常惊艳。有哪些具体的应用场景,是你特别期待人们用这个模型来构建的?


马克·扎克伯格:我最兴奋的是看到人们使用Llama 3.1来蒸馏和微调他们自己的模型。根据我们的估计,相较于GPT-4o,这样做成本能降低大约50%。显然,这将对许多人产生重大影响。但我认为,这个模型真正的新颖之处在于,它是开源权重的,能够将模型蒸馏成任何你想要的大小,用于合成数据生成,用作教师模型使用。


我们对于未来的构想,并非局限于某单一模型。OpenAI、Anthropic、Google 或许各有其打造大型AI模型的愿景,但这从来不是我们所追求的。我们的愿景是应该有许多不同的模型,每个初创公司、每家企业乃至政府机构,都将拥有各自的定制化模型。


Llama 3.1带来的一项显著改变是,我们不再仅限于为自己开发模型,然后简单地将其推给开发者自用。这次,我们采取了更为积极主动的态度,即建立合作伙伴关系,致力于生态系统建设,让各类企业能够利用这个模型创造价值,以我们自身无法覆盖的方式服务于开发者。随着社区的成长和更多公司开发新服务,我们可以共同使Llama成为行业标准,并将AI的益处带给每个人

截图来源:Meet Llama 3.1


#02

开源AI是前进的道路



Rowan Cheung:接下来聊聊你的公开信,除了Meta的公告,你还发表了一封信,能再谈谈开源AI对社会的广泛影响吗?


马克·扎克伯格:我相信开源对于实现积极的AI未来至关重要。AI比任何其他现代技术都更有潜力提高人类的生产力、创造力和生活质量,并且能够在加速经济增长的同时推动医学和科学研究的进步。开源将确保全球更多的人能够从AI的发展中获得利益和机会,权力不会集中在少数几家公司手中;开源最终将成为构建更安全、更可靠的AI途径。


关于开源AI模型的安全性,存在着持续的争论。我的观点是,开源AI比封闭开发更安全。


在我理解的安全性框架中,我们需要防范两类危害:无意和故意。


  • 无意的危害是指AI系统可能在运行时非故意地造成伤害。例如,现代AI模型可能在无意中给出错误的健康建议。或者,在未来场景中,有人担心模型可能会无意中自我复制或过度优化目标,从而对人类造成损害。

  • 故意的危害是指不良行为者使用AI模型以造成伤害为目的。


值得注意的是,无意的危害涵盖了人们对AI的多数担忧——从AI系统对数十亿用户的影响到大多数真正灾难性的科幻场景。在这方面,开源所带来的安全性更加显著,因为系统更透明,可以被广泛审查。因此,大多数关于开源AI安全性的讨论集中在故意的危害上。


对于故意的危害,大致可分为两类:较小规模的行动者,如个人或小团体试图制造混乱;以及较大规模、更复杂的行动者,如拥有雄厚资源的大国。这两类情况有不同的应对策略。对于较小规模的恶意行为,保持权力均衡至关重要,用更先进的AI系统来识别和阻止他们。


在面对大型复杂行动者时,常被提及的一个疑问是:如果开源了最尖端的模型,如何确保它不会落入竞争对手或其他国家手中?这有时被用作封闭开发的借口,但我认为,这种观点忽略了几个重要点。那就是这一切的前提是,我们仍处于领先。我们的优势在于开放和去中心化的创新,不仅局限于少数大公司或实验室,还有初创公司、大学等。如果采取封闭的方式,我们甚至有可能无法再领先。其次,考虑到模型容易被窃取,现实是任何科技公司都难以长期确保模型安全。我的观点是,我们应该用开源来开发全球领先且最强健的生态系统。


Rowan Cheung:还有一件事,你在信中直接点名批评了苹果及其封闭的开发方式,这让我有些意外。你能进一步讲讲苹果在哪些方面阻碍了Meta,乃至可能影响了其他公司?


马克·扎克伯格:在信中,我的观点更多的是哲学层面的,它如何影响了我对待事物的方式,以及在心理上如何影响我对构建事物的思考方式。真正令人沮丧的是,当你倾力打造了你认为对社区有益的功能,却被告知无法上线,因为某家公司想通过限制你,以便更好地与你竞争。


就AI而言,我的担忧实际上并不在于苹果,而是其他公司以及它们将如何发展。在某种程度上,我并不是在指责他们是坏人,而是封闭系统的物理特性和激励机制,最终会导致各种力量促使你去限制某些事情。


我认为,如果AI生态系统能像互联网那样发展,但功能更加强大,那它将是一个更健康的生态系统。因为在移动互联网的发展过程中,封闭模式获胜了,苹果几乎囊括了移动电话市场的所有利润,因此人们普遍认为封闭模式更好。我认为这存在一定的近期偏见。iPhone于2007年首次亮相,已经接近20年了,这是一个漫长的周期,但人们很容易忘记封闭模式并不总是获胜。如果回到PC时代,特别是当你借鉴Linux的类比,人们可能不认为Windows是最开放的,但与苹果将操作系统与设备捆绑在一起的做法相比,Windows代表了一种更开放的生态系统,并取得了胜利。


对于下一代平台,包括AI和AR/VR领域,Meta是站在建造开放生态系统那一边的。这不仅仅是想要构建一个封闭生态系统之外的替代品,而是希望这个行业恢复至开放生态系统实际上处于领先的状态。我认为这是完全可行的,这是我个人和哲学上关心的事情,因为我感觉过去10到15年移动互联网的封闭模式对我们这个行业的创造力有所限制。


Rowan Cheung:在你的信中还提到,Llama 4有望成为行业中最先进的模型。Llama 4有什么特别令人兴奋的地方吗?


马克·扎克伯格:我们刚刚发布了Llama 3.1,现在谈论Llama 4可能有点早,但我们已经设置好了计算集群,准备了大量的数据,对架构有了初步构想,并进行了一系列研究实验,以充分挖掘其潜力。所以,我相信Llama 4将在Llama 3的基础上再一次实现重大飞跃,我们还有许多进展待实现。


#03

AI的未来愿景



Rowan Cheung:你能谈谈你对未来AI甚至是AGI的长期愿景吗?


马克·扎克伯格:我们的愿景是,未来应该有很多不同的AI和AI服务,而不是局限于一个单一的AI。这也是为什么我们会选择开源的方式,同时也影响了我们的产品路线图。


我们拥有Meta AI,它的表现十分突出。我的目标是,在今年年底前让它成为世界上使用最广泛的AI助手,我们正在朝这个目标前进。因此,我认为,我们的商业模式使我们有能力构建世界上最先进的模型,并免费提供给所有人,这是一个巨大的优势。它在我们所有的应用程序中都很容易使用。更为重要的是,我们致力于让每位创作者和每个小企业都有能力创建自己的AI智能体,使每个人都能在我们的平台上创建自己想要互动的AI智能体。


想象一下,这背后蕴藏着巨大的空间,全球有数亿家小企业。我认为至关重要的一点是,通过相对较少的工作来完成智能体的构建。企业只需点击几次鼠标,就可以为自己搭建一个AI智能体,用于客户服务、销售,与所有员工、客户沟通。未来每家企业都将拥有一个AI智能体,就像它们今天拥有电子邮件、网站和社交媒体一样。我想我们将生活在一个有数亿甚至数十亿AI智能体的世界中。最终,AI智能体甚至可能会比人类还多,人们会以各种方式与之互动。这就是产品愿景。显然,其中蕴藏着巨大的商机,也是我们希望从中盈利的部分。


我们不会通过出售模型的访问权限来盈利,因为我们并非云服务公司。我们将通过打造卓越的产品来实现盈利,打造卓越产品的一个重要因素是拥有最好的模型,而拥有最好的开源生态系统将帮助我们实现这一目标。所以,这就是为什么这一切都对我们来说是一致的,通过建立开源社区,我们可以构建高质量的产品,并获得最好的商业成果


Rowan Cheung:马克,和你谈话真是太棒了。非常感谢你参与这次访谈,也感谢你和Meta为AI社区所做的一切。


马克·扎克伯格:很高兴能做这件事。我也非常期待看到人们建造的成果。



相关参考:

访谈原文链接:https://www.youtube.com/watch?v=Vy3OkbtUa5k

公开信原文链接:https://about.fb.com/news/2024/07/open-source-ai-is-the-path-forward/

扎克伯格深谈最强大模型:回应公开信「点名」苹果,未来智能体的数量将比人类更多》,APPSO

《最强模型Llama 3.1如期而至!扎克伯格最新访谈:Llama会成为AI界的Linux》,AI科技大本营


*素材来源于网络


全球精选栏目


全球精选致力于为你“筛选、记录、解构”海内外最优质的人工智能前沿信息。


在这里,你将发现世界各地的创新成果、科技突破、行业趋势、商业思考以及那些引领AGI潮流的精英企业和人物。


此栏目每周更新,描摹AGI时代国际格局,与全球创新者共探未来。







点击阅读原文观看WAIC 2024精彩

世界人工智能大会
聚焦人工智能行业前沿,跟踪世界人工智能大会信息
 最新文章