ZeroSearch – 阿里通义开源的大模型搜索引擎框架

2025-05-10 0 161

ZeroSearch是什么

ZeroSearch 是阿里巴巴通义实验室开源的创新大模型搜索引擎框架,基于强化学习激励大模型的搜索能力,无需与真实搜索引擎交互。框架爱基于大模型预训练知识,转化为检索模块,根据查询生成相关或噪声文档,动态控制生成质量。在多个问答数据集上,ZeroSearch 的性能超过谷歌搜索,大幅降低训练成本(降低80%以上)。基于轻量级监督微调和课程学习机制,ZeroSearch 逐步提升模型推理能力,支持多种强化学习算法,具有很强的扩展性和通用性。

ZeroSearch的主要功能

  • 无需真实搜索引擎交互:模拟搜索引擎的方式,激励大模型的搜索能力,避免与真实搜索引擎(如谷歌)的交互,降低成本和不可控性。
  • 动态控制文档质量:支持生成相关或噪声文档,基于调整提示中的关键词,灵活控制生成文档的质量,为训练提供多样化的检索场景。
  • 降低成本:相比使用真实搜索引擎进行强化学习训练,ZeroSearch 的训练成本大幅降低(超过80%),让大规模训练更加可行。
  • 支持多种模型和算法:兼容不同参数规模的大模型(如3B、7B、14B),支持多种强化学习算法(如PPO、GRPO)。

ZeroSearch的技术原理

  • 模拟搜索引擎:基于大模型自身的知识,转化为模拟搜索引擎,根据查询生成相关或噪声文档,替代真实搜索引擎。
  • 轻量级监督微调:基于少量标注数据对大模型进行微调,生成高质量或低质量的文档,适应不同的训练需求。
  • 课程学习机制:在训练过程中逐步增加文档的噪声水平,让模型从简单场景开始,逐步适应更具挑战性的任务,提升推理能力。
  • 基于 F1 分数的奖励机制:用 F1 分数作为奖励信号,专注于答案的准确性,确保模型生成的答案与真实答案尽可能匹配。
  • 多轮交互模板:设计明确的推理、搜索和回答阶段,基于结构化的标签(如 、、)引导模型逐步完成任务。

ZeroSearch的项目地址

ZeroSearch的应用场景

  • 智能问答系统:快速准确地回答用户问题,适用智能客服和智能助手。
  • 内容创作:帮助创作者获取信息,生成初稿或提供灵感,适用新闻、文案和学术写作。
  • 教育与学习:为学生提供即时解答,支持在线教育和智能辅导。
  • 企业知识管理:帮助员工快速检索公司内部资源,提高工作效率。
  • 研究与开发:为研究人员提供最新研究成果,加速研究进程。

若非本站原创的文章,特别作如下声明:
本文刊载所有内容仅供提供信息交流和业务探讨而非提供法律建议目的使用,不代表任何监管机构的立场和观点。
不承担任何由于内容的合法性及真实性所引起的争议和法律责任。
凡注明为其他媒体来源的信息,均为转载,版权归版权所有人所有。
如有未注明作者及出处的文章和资料等素材,请版权所有者联系我们,我们将及时补上或者删除,共同建设自媒体信息平台,感谢你的支持!

AI老司机 AI行业动态 ZeroSearch – 阿里通义开源的大模型搜索引擎框架 https://www.ailsj.cn/1639.html

相关文章

发表评论
暂无评论