2026年7月2日 周四晚上19:30,报名腾讯会议了解“如何构建自进化的动态知识库(Brain)”(限30人)
免费POC, 零成本试错
FDE知识库

FDE知识库

学习大模型的前沿技术与行业落地应用


收藏

从一个简单评测看AI搜索走到头了吗

发布日期:2025-03-01 23:03:11 浏览次数: 2977
作者:胡言Ray语

微信搜一搜,关注“胡言Ray语”

推荐语

AI搜索技术突破引发激烈讨论,深度评测揭示行业现状。

核心内容:
1. DeepSeek R1+联网搜索功能引爆全网,体验大幅提升
2. 评测2025年2月大模型公司新模型发布情况,问题背后的复杂性
3. 对比benchmark老AI搜索和带长推理能力的AI搜索,DeepSeek表现如何

杨芳贤
53AI创始人/腾讯云(TVP)最具价值专家

随着DeepSeek R1+联网搜索功能引爆全网,笔者也切身感受到有了思维链加持之后AI搜索的体验比之以往大有提升,但随之而来是一个问题:AI搜索的工程/模型优化真的走到头了吗?又或者,随着向OpenAI DeepReaserch范式的方向演进,在“搜索/研究某个命题”这个领域,真的已经能做到取代部分人的工作了吗? 

带着以上疑问我做了一个很小的评测,看结果前,先给大家解释一下背景: 

评测问题:2025年2月都有哪些大模型公司的新模型发布?

为什么选择这个问题?看起非常简单对吧,其实背后的门道还是挺深的。比如:什么样的公司算大模型公司?(需要考虑全球范围吗?什么领域?某个垂直领域的算吗?);新模型指的是LLM还是也包含Transformer范式下的多模态大模型、或者文生图/视频之类采用DiT架构的模型?2025年2月看似很明确,但一个月跨度下的新闻量非常大。笔者在相对熟悉行业信息的前提下,通过相对优质的信息源整理了半小时以上,才在下表中列出了11家公司19个模型的List。这里要特别说明一下,这个列表也只能代表笔者基于自己的行业认知做出的判断,难免有挂一漏万的可能。此外,整理完之后也不得不感慨一句:真TM卷...除了几家头部大厂的明星模型,过去一个月其实还有很多可能在新闻里一闪而过的名字,不信你可以看看下表的第一列。 

解释一下评测对象们

大致可以归为以下几类: 

  • benchmark(老AI搜索):选择了智谱的AI搜索功能,智谱虽然也发了推理模型(有印象吗?),但AI搜索用的还是不带推理的版本。这是R1出来之前AI搜索的老范式:

    搜索词query改写/扩写➡️从搜索引擎中拿到部分搜索结果➡️进行相关性重排序(Rerank)➡️排序靠前的结果作为input一并给到LLM➡️LLM结合搜索结果、预训练知识和用户原始query总结回答问题。 

    Image
  • 带长推理能力的AI搜索:选择了DeepSeek、腾讯元宝、Monica三家的网页版作为典型代表,工程上跟老的AI搜索范式没有本质区别,只是在最后一步,模型会结合网页信息先进行思考,再输出回答。如下:
Image

由于模型都是满血版DeepSeek R1(姑且信之),那么上面三家的差别主要就来自搜索网页的部分。做得简单一些的话可以少量query改写(甚至不改)+对接一个Bing/Brave/Tavily之类的搜索API,大多数人不会重新做一套全网爬虫+索引,当然类似腾讯/百度这类有自己搜索引擎产品的除外。召回网页之后需要抓取网页内容(也有一些搜索插件服务只提供摘要)并且基于用户的问题做一下相关性排序(有成熟的相关性算法)。其实从这个过程中可以看出,采用哪家的爬虫/搜索API(也代表了能爬到哪些内容)、query改写的策略、搜索召回的数量、重排策略、最终吐给模型的内容量等等都会影响一次AI搜索结果的好坏。而由于DeepSeek R1的加入,反而在获得内容之后模型有了更多时间思考、比对、校验甚至反思吐给它的内容,从而优化了输出质量。 

  • 模型智能只能用在总结阶段吗?当然不是,比如秘塔的研究模式下有一个先想后搜模式,会先用模型对用户query进行一定的分析,列出搜索提纲再去搜索内容,最后召回的结果再用R1总结一遍:
Image
Image

关于这种“先想后搜”的模式,最近结合字节Coze上线了带function call(工具调用能力)的R1之后(原生的R1 function call能力比较弱)有了一个简单的复现方法如下: 

Image

运行时你会神奇的发现在思维链中模型出现了一个“停顿点”,然后还是调用搜索插件分析搜索结果: 

Image

此外,秘塔还有一点不同是除了通用搜索外应该还做了不少垂域数据的索引,比如你能从中搜到大量的研究报告和论文,这是其他AI搜索目前做不到的。 

  • 还有一个“终极”形态。 最后说说OpenAI的DeepResearch,除了用到了最新的O3模型,DeepResearch和上述这些AI搜索最大的差别在于它是是一个“端到端”训练了搜索网页获取信息这个技能的Agent.这点在昨天DeepResearch主创的访谈中有所印证:
Image

也就是说不同于无论上述“先搜后想”还是“先想后搜再想”的AI搜索的工程范式,DeepResearch采用的是“边想边搜”的模式,模型端到端地去学习人怎么结合一个命题去搜索网页-思考之后调整搜索词-再搜索-如此往复的行为。(这种思路也是模型去规则化的一种趋势,比如智驾领域从感知-依赖规则的规划决策-行动,转变为端到端的视觉进-动作出)具体到我们评测的问题上,DeepResearch的思考过程如下(OpenAI应该还是做了一定的简化的): 

Image

说句题外话,这例子也很好地解释了Agent这个概念除了规划、记忆和使用工具外,能对环境变化进行实时交互也是至关重要的。 

评测结果

啰嗦了这么久,各种AI搜索/研究的模式都分析过了,看看结果到底如何? 

备注:测试时间为2-28中午,测试query相同均为“2025年2月都有哪些大模型公司的新模型发布?”,所有产品都开了联网搜索能力,其他差异如下表所示: 

  • 先说结论:全线拉跨,没有任何一位“先进模式”的选手在成绩上超过作为benchmark的智谱“普通”AI搜索
  • 信源上:腾讯元宝凭借独有的微信公众号以及时效性(比如今天发布的GPT4.5)取得一定优势(但不明显),其他家主要就是通过搜索获得的门户媒体信息,值得一提的反而是作为参照物的智谱采用了不少知乎、雪球等信源。此外秘塔特有的pdf研究报告信源,由于内容比较老旧,在这类高时效性问题上反而是吃亏的。
  • 深度思考固然好,但前提是找对信息:对比DeepSeek和智谱的成绩得出的结论。
  • DeepResearch的优势是基于用户问题扩展,比如能主动总结这些新发模型具体的技术细节、应用场景,或者性能对比等信息,但在这道更偏事实性的问题上,这种优势发挥不出来。
  • 世界上还是存在大量“长尾”信息的,比如这里除了头部OpenAI、Anthropic、Google以及DeepSeek、通义以外,其他的模型公司似乎被AI搜索抛到了聚光灯以外(马斯克、字节:Are you OK?)

53AI,企业落地大模型首选服务商

产品:场景落地咨询+大模型应用平台+行业解决方案

承诺:免费POC验证,效果达标后再合作。零风险落地应用大模型,已交付160+中大型企业

联系我们

售前咨询
186 6662 7370
预约演示
185 8882 0121

微信扫码

添加专属顾问

回到顶部

加载中...

扫码咨询

扫码登录
登录即表示您同意《53AI网站服务协议》
服务协议

欢迎您使用【53AI 官方网站】(以下简称“本网站”或“我们”)。本《会员服务协议》(以下简称“本协议”)是您(以下简称“会员”或“用户”)与【深圳市博思协创网络科技有限公司】之间关于注册、登录及使用本网站会员服务所订立的法律协议。

在您注册或登录前,请务必审慎阅读、充分理解各条款内容,特别是免除或限制责任的条款、知识产权条款、争议解决条款等。此类条款将以加粗形式提示您注意。 当您通过微信公众号授权、手机验证码验证或其他方式成功登录本网站时,即视为您已完全理解并同意接受本协议的全部内容。

一、 定义

本网站:指由【深圳市博思协创网络科技有限公司】运营的,域名为【53ai.com】的网站及相关移动端页面。

会员服务:指本网站向注册会员提供的知识库文章查阅、内容检索及其他相关增值服务。

知识库内容:指本网站发布的包括但不限于文字、图表、数据、研究报告、行业分析等数字化内容资源。

二、 账号注册与登录

登录方式:本网站支持以下登录方式,您可根据实际情况选择:

微信公众号授权登录:您同意将您的微信OpenID信息授权给本网站,用于创建或关联会员账号。

手机验证码登录:您需提供真实有效的手机号码,并通过短信验证码完成身份验证与登录/注册。

账号安全:您的账号仅限您本人使用,禁止赠与、借用、租用、转让或售卖。因您保管不善导致的账号被盗、密码泄露等损失,由您自行承担。

实名认证:根据相关法律法规要求,我们可能要求您在特定功能下完成实名认证。如您拒绝提供,可能无法使用部分或全部服务。

未成年人保护:若您未满18周岁,请在法定监护人的陪同下阅读本协议,并在征得监护人同意后使用本服务。

三、 服务内容与规范

知识库查阅权限:会员登录后,有权按照其会员等级对应的权限范围,在线浏览、检索本网站知识库中的相关文章及内容。

服务变更:我们有权根据业务发展需要,调整、变更或终止部分服务内容,并将以网站公告、公众号消息等方式提前通知。

禁止行为:您在使用服务时不得实施以下行为:

利用技术手段批量爬取、下载、转存知识库内容;

将知识库内容用于商业目的或未经授权地向第三方传播;

干扰本网站正常运行或侵犯其他用户合法权益;

发布违法违规信息或从事违反公序良俗的活动。

四、 知识产权声明

权利归属:本网站知识库中的排版设计、软件代码等内容的知识产权均归【公司全称】或原权利人所有,受《中华人民共和国著作权法》等法律保护。

有限许可:本网站授予会员一项非独占、不可转让、不可转授权的普通许可,仅限于个人学习、研究之目的在线查阅知识库内容。

侵权追责:未经书面许可,任何单位或个人不得以任何形式复制、转载、摘编、镜像、汇编或以其他方式使用上述内容。一经发现,我们保留追究其法律责任的权利。

五、 个人信息保护

我们重视对您个人信息的保护。关于我们如何收集、使用、存储和保护您的个人信息,请单独阅读 《隐私政策》。

您通过微信公众号授权或手机号验证所提供的信息,我们将严格按照《个人信息保护法》的规定处理,仅用于身份识别、服务提供及安全验证等必要用途。

您可以随时通过网站设置或联系客服行使查阅、更正、删除个人信息及撤回授权同意的权利。

六、 免责声明

内容准确性:知识库内容仅供参考,不构成专业建议。我们不对其完整性、准确性、时效性作任何明示或暗示的保证,您应自行判断并承担使用风险。

不可抗力:因自然灾害、政策法规变化、网络故障、第三方平台接口异常(如微信接口维护、运营商短信通道故障)等不可抗力导致的服务中断或延迟,我们不承担违约责任。

第三方链接:本网站可能包含指向第三方网站的链接,该等网站的内容和服务不受我们控制,请您自行甄别风险。

七、 违约责任

如您违反本协议约定,我们有权视情节采取警告、限制功能、暂停服务、注销账号等措施,并保留要求赔偿损失的权利。

如因您的违约行为导致我们遭受行政处罚、第三方索赔或商誉损失,您应承担全部赔偿责任(包括但不限于罚款、赔偿金、律师费、公证费等)。

八、 法律适用与争议解决

本协议的订立、执行和解释均适用中华人民共和国大陆地区法律。

因本协议产生的或与本协议有关的任何争议,双方应友好协商解决;协商不成的,任何一方均可向【公司所在地】有管辖权的人民法院提起诉讼。

九、 其他

本协议构成双方就本服务达成的完整协议,取代此前任何口头或书面约定。

本协议任一条款被认定为无效或不可执行的,不影响其他条款的效力。

我们对本协议享有最终解释权,并在法律允许的范围内保留随时修改的权利。修改后的协议一经公布即生效,继续使用服务即视为同意修订内容。


已查阅