周鸿祎撺了十五家大模型公司,说要组一个「复仇者联盟」干灭霸?

财富   2024-08-01 22:52   美国  

本来以为AI搜索这玩意短期内已经没啥可卷的。

直到今天在ISC大会上,看到了这个架构。

给我干懵了。

用一句话说,就是根据用户不同问题,来调用不同的模型进行回答。

因为至今为止,没有一个非常全面的大模型,能说自己在所有任务上都是最顶尖的,我们在日常使用中,有无数奇奇怪怪的场景。

有写论文,有翻译,有诗歌,有写代码,有阅读理解,有学习,有任务拆解,太多太多太多了。

强如GPT4o,也不是什么都牛逼的,比如你让他写作看看,不知道被Claude锤到哪里去了,还有偏国风的诗词理解和生成,也是纯弟弟。

而市面上这么多模型,其实每个模型都有自己最强的部分的,比如就说学科和做题上,好未来的大模型往那一放,谁敢说比他牛逼?

所以单个模型,都有短板,但是你要是把一群大模型放一起,针对特定的任务,解决特定的问题。

这特娘的就是个水桶级别的妥妥的复仇者联盟

钢铁侠就是字节豆包,绿巨人就是腾讯混元,鹰眼就是月之暗面,黑寡妇就是好未来。。。

至于美队是谁,那只有一个选择。

那就是360。

至于为啥,原因很简单,因为这个架构,就是360牵头做的。。。

管理能力和撺局能力,才是美队的核心,你就说现在的大模型公司,谁还比老周有号召力吧。

至于灭霸,那必然是那个GPT4o了。。。

再把这个复仇者联盟跟GPT4o对比一下。

我只能说,牛逼。我自己打不过你,但是我喊所有兄弟一起上,你就是灭霸也得给我在地上躺板板。

360把这玩意,称为CoE混合模型。

我大概拆了一下这架构的报告,做法真的有点意思。

他们先从360AI搜索的真实问题里,找了几千万条用户的真实数据,分成了4000类,然后对这十五家模型一顿测试。

注意,是4000个分类,不是40个,是4000个。。。

国际通用的评测集,一般也就是10个左右。

比如Claude3.5的,就是8个。

他们干了4000种意图分类,比如知识问答、数值比较等等,还有100种技能分类,比如翻译、分析啥的,还有1000多种领域分类,比如生活、学术、医疗等等。

然后花了2个月的时间,用这么多种分类,对十五个大模型,进行了疯狂的量化测试。

测试的结果,就形成了十五个大模型的QA的问答对数据集,再让十五个大模型和GPT、Claude,还有人工,一起给这些问答对数据集来打分。

最终决出,每个分类下,最强的大模型。。。

太狠了,就是可惜没看到这十五个模型,在每种分类上,效果怎么样。

因为毕竟是360牵头的合作,要是暴露某个大模型在某个领域倒数第一,那可能对那家公司口碑影响也挺大的,所以所以除了对照组GPT4o,360把其他的模型名字都隐去了,只用代号替代。

用这种超级海量的数据测试,测完以后,就知道,用户的哪个问题,应该属于什么分类,应该用什么模型来回答,效果才最好。

所以,形成了一个巨大的闭环。

根据用户的问题,先做意图识别,看看属于什么任务,然后用解决这个任务最好的模型,加上一些已经预制好的Agent,来解决用户的问题。

这尼玛,就是一个全自动的复仇者联盟,真的。

你灭霸要跟我拼财力,钢铁侠上,拼力量,绿巨人上,拼精准,鹰眼上,拼颜值,那自然是我寡姐上了。

你要是想强行55开,不好意思,我这还有个美队。

真的有点东西,很有趣。

在发完这套架构之后,我另一个没想到的是,他们直接把这玩意,扔到了360AI搜索上。

嗯,现在已经可以用了。。。

这速度绝逼跟快手学的。

网址:https://www.sou.com/

现在你能体验到的360AI搜索,已经是被复仇联盟加持完的水桶AI搜索了。

我随手试了一下,有很大的不同了。

比如说现在巴黎奥运会,我让他写一篇巴黎奥运会开幕式的评论文章,他不是跟以前的AI搜索一样,搜完了拿了一堆资料直接写。

而是先识别我的意图,发现是个写作需求,然后用一个复杂的写作Agent接管了,步骤巨多巨长。

而最终的效果,确实写的不错。

我又试了一下一个很坑爹的问题:

四川省省会和安徽省省会哪个人数更多

这个问题你可以随便拿去问别的AI搜索,一问一个不吱声= =

360AI搜索,答得还是很好的。

再试一个问答+翻译任务:

“天上仙人月里栽,无端飘逐海风来。可能种作千寻树,岁看高花烂漫开。是谁的诗?怎么翻译成英文”

然后我又用另一个AI翻译了一个版本。

反正看着,差距还是挺大的,主要我又不太懂英文,于是,我就把这两个翻译,都扔给了ChatGPT这个灭霸。

让他看看他觉得哪个最好。

这个复仇者联盟,有点猛。

不过360AI搜索有个缺点,就是对小白非常的友好,但是你没法自己去特定的选用哪个模型回答,比如我就是叛逆,我就是喜欢Kimi和豆包,这两玩意都想在一个里面去用。

于是这个复仇者联盟又做了一个AI助手。

网址在此:https://bot.360.com/

你能在里面,一站式的,用几乎所有的国产大模型。。。

真的,这个复仇者联盟,真的坐实了。

现在再回头看看CoE这个架构,其实我们能非常的清楚的认知到,这玩意,过于朴素,过于有价值。

但是难点,就是有一个人,有一个美队,能把这群人聚集在一起,一起做资源,一起做渠道,一起把大模型这件事,普惠下去。

而现在,老周和360站出来了。

说我就是那个美队。

那我们,要不要一起干点事?

于是。

Avengers Assemble!!!

以上,既然看到这里了,如果觉得不错,随手点个赞、在看、转发三连吧,如果想第一时间收到推送,也可以给我个星标⭐~谢谢你看我的文章,我们,下次再见。
>/ 作者:卡兹克
>/ 投稿或爆料,请联系邮箱:wzglyay@gmail.com

人工智能与量化交易算法知识库
黄含驰的人工智能、优化与量化交易算法知识库,干货满满,不容错过!
 最新文章