news 2026/5/1 7:51:45

AI产品经理必备技能:RAG技术全解析,值得收藏的技术宝典

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
AI产品经理必备技能:RAG技术全解析,值得收藏的技术宝典

本文详细介绍了RAG技术的7个核心概念:向量数据库实现语义检索、混合检索提升效率、分块嵌入与索引优化存储、重排序提高相关性、上下文融合整合多源知识、准确率与召回率的平衡评估,以及知识图谱增强推理能力。这些技术共同构成了RAG系统的基础,使AI产品经理能够构建更准确、高效的大模型应用。


未来,每个产品经理都是 AI 产品经理,而每个 AI 产品经理都必须懂 RAG。

所谓RAG(Retrieval - Augmented Generation),即信息检索(Retrieval)+内容生成(Generation)。

图片来源:百度

通过 RAG,可以让大模型从指定的内部知识库“检索”准确的内容,再根据准确的内容“生成”回答内容,从而有效避免幻觉。

比如,如果直接让大模型进行医疗诊断,由于大模型的本质是概率模型,因此它会提供大量错误或者不相关的信息。

有了RAG,大模型就可以从海量的医学文献、病例库中直接检索与患者病症相关的知识,再生成诊断建议供医生参考,从而提高内容的准确性。

接下来给大家介绍 RAG 的 7 个核心概念,看完以后,你会对 RAG 有更深入的认识。

1、向量数据库

向量数据库是 RAG 最重要的基础设施之一。

传统数据库的内容查询主要依赖“关键词匹配”,对查询的精确度要求很高。

比如,如果你查询“如何提高工作效率”,而数据库只有“时间管理技巧”内容,那么就无法搜索出任何内容。

而向量数据库就可以有效解决这个问题,它会把各种知识都转换成一组组数字(向量),这些数字能代表知识的内容和特点,

当你在 RAG 系统中输入查找信息时,它会把输入信息也转换成一组数字(向量),然后在数据库中找出最相关的知识,从而实现“语义检索”。

图片来源:百度

比如,下面的每个知识都转化为了一个 3 维向量(实际应用中可能把一个知识转化为几十甚至几千维的向量):

时间管理:[0.12,0.23,0.46]

工作地点:[0.92,0.82,0.65]

考勤制度:[0.83,0.93,0.78]

当用户查询“工作效率”,向量数据库就可以把“工作效率”转化为向量: [0.12,0.23,0.53]。

显然它和“时间管理”的向量 [0.12,0.23,0.46] 相似度很高——从业务上来说,是因为“时间管理”是提高“工作效率”的一种有效方法,这就导致两者的语义高度相关。

其实,这就是“语义检索”的过程。

在传统客服系统中,由于依赖“关键词匹配”,在面对复杂咨询时,就很难给出用户想要的答案。

而 AI 客服使用向量数据库,当用户咨询时,可以通过 “语义检索”快速找到最相关的答案,从而提升用户体验和满意度。

2、混合检索

图片来源:CSDN@智兔唯新

基于向量知识库的语义检索虽然很好,但是也存在 2 个问题:

首先是面对超大数据量,语义检索的速度不如传统的关键词检索。

其次是对于一些需要精确匹配的场景,关键词匹配更有优势。比如在法律文件检索中,法律条文、案例等对措辞的精准要求就很高。

因此,在很多场景下,RAG 会同时使用关键词检索和语义检索,从而尽可能的提升检索体验。

比如,在电商平台上,用户搜索“无线蓝牙耳机”。纯语义检索可能会推荐一些带有“无线”或“蓝牙”字样的普通耳机,但混合检索除了语义匹配,还会根据关键词“无线蓝牙”进行精确匹配,确保优先推荐符合“无线蓝牙耳机”这一完整要求的产品。

3、分块、嵌入与索引

RAG在存储知识时,为了更高效地管理和检索,通常会将原始文档按照一定的规则(如固定长度、语义单元等)分块。

就如同一本很长的小说,如果把它切成一个个章节或者更小的段落块,那么在查找某个故事情节时就更方便快捷。

分块以后,还需要把每一个块转化为向量,从而存储到向量数据库,这就是嵌入。

嵌入以后,还可以把向量存储到一个高效的检索结构中,以便快速进行相似性计算和检索,这就是索引。

比如,某法律咨询平台为用户提供在线法律咨询服务。

由于法律领域的知识库通常非常庞大且复杂,包含大量的文本信息,如法律条文、司法解释、案例判决书等。

在构建知识库时,就可以将法律条文、案例等长文本分割成多个小块,同时,利用索引结构记录每个小块的向量位置,以便快速检索。

这样,当用户输入法律问题,如“合同违约的赔偿标准是什么”,RAG 就可以从数据库中快速找到最相关的多个小块,并通过上下文融合来生成更为准确和完整的答案。

4、重排序(re-rank)

图片来源:公众号:AI大模型应用实践

当 RAG 从数据库中检索出多个内容时,需要选取相关性最大的内容喂给大模型,从而提高大模型的回答质量。

所谓重排序,是指 RAG 将初步检索出来的内容进行重新排序,其目的是将最相关的信息排在前面,从而选取出相对更为准确的内容。

打个比方,你想让 AI 搜索一批书籍,RAG 会先大致找出一批可能你想要的书籍,然后仔细评估每一本书和你需求的契合程度,把最符合你心意的书排在最前面,方便你优先查看。

重排序的应用非常广泛,比如电商平台根据用户需求初步筛选出一批商品后,就会通过“重排序”,根据用户的实时行为、偏好历史等,对推荐商品进行重新排序,把更符合用户当下需求的商品排在前面,提高推荐的准确性和实用性。

5、上下文融合

上下文融合是指 RAG 将从多个来源检索到的知识进行整合,以便为大模型提供更全面、连贯的输入内容,这样大模型的回答才能条理清晰、内容完整。

比如,在智能客服场景中,用户咨询:“我刚收到的商品有点瑕疵,我可以申请退货吗?”

要回答好这个问题,RAG 就需要从多个来源检索信息,比如用户的订单信息、退货政策等,再把这些内容整理成统一的内容,以便大模型能够基于内容生成高质量的回答。

6、准确率和召回率

准确率(Precision)是指在 RAG 检索到的内容中,与用户问题真正相关的内容的比例。

例如,在一个问答系统中,检索到 10 条知识,其中有 8 条与用户问题高度相关,那么准确率就是 80%。

准确率是衡量检索质量最重要的指标之一。

比如,智能客服在回答用户问题时,如果准确率不高,就会提供大量不相关或错误的答案,影响用户体验。

但是,只有高的准确率还不够,还必须有高的召回率。

所谓召回率(Recall),是指与用户问题相关的所有知识中,被成功检索到的比例。

例如,知识库中有 20 条与用户问题相关的知识,检索到 12 条,那么召回率就是 60%。

在实际应用场景中,召回率和准确率往往会成为跷跷板。比如如果过度追求高召回率,可能会导致检索结果中包含大量不相关的信息,影响准确率。反之亦然。

比如,在一个电商商品检索系统中,为了尽可能多地召回相关商品,降低了检索阈值,结果导致很多边缘相关甚至不相关的商品也出现在结果中。

在这种情况下,我们可以引入 F1 值进行综合评估,从而找到召回率和准确率之间的平衡点。

F1 值的计算公式是:F1= 2*(准确率*召回率)/(准确率+召回率)。

在这个公式中,当准确率或者召回率中的任何一个非常低时,F1 值也会相应的降低。

7、知识图谱

图片来源:CSDN@思通数科x

知识图谱就像是一个巨大的知识网络,把各种知识当作一个个节点,并且把有关系的节点进行连接。

比如,通过知识图谱可以对菜谱知识进行管理,把各个菜谱、原材料、烹饪方法连接起来,这样,当用户询问“用鸡蛋可以做哪些菜”时,RAG 就可以通过“菜谱-原材料”的连接关系,准确找到使用“鸡蛋”的菜谱。

通过知识图谱,RAG 能够捕捉到实体间的复杂关系,还能够基于已有的实体关系进行推理和扩展,发现更多潜在的相关信息,从而大大提升准确率和召回率。

比如,一年级有 5 个班,RAG 数据库中记录了 5 个班各自的期末成绩,但是并没有存储“一年级所有同学的平均成绩”。

这就导致,当用户询问“一年级期末平均成绩是多少”时,RAG 找不到相关内容,最后给出一个错误的答案。

但是,如果我们通过知识图谱建立了“一年级”和“5 个班级”之间的实体关系,RAG 就能根据根据这个关系找到“5 个班级的期末成绩”,再通过计算给到用户一个准确的回答。

最后,一个 RAG 系统的运行可能包含以下步骤:

1、向量数据库提供知识存储的基础设施

2、对内容进行分块、嵌入和索引,以方便检索

3、再通过知识图谱建立相关实体的关系,从而提高检索和生成的准确度

4、当用户查询时,通过混合检索、知识图谱等方式检索内容

5、然后把检索出来的内容进行重排序,选出最相关的内容

6、把选出的内容进行上下文融合,提供给大模型生成回答内容

7、最后,通过 F1 值对 RAG 系统的准确率和召回率进行综合评估

以上内容,你学废了吗?

​最后

我在一线科技企业深耕十二载,见证过太多因技术卡位而跃迁的案例。那些率先拥抱 AI 的同事,早已在效率与薪资上形成代际优势,我意识到有很多经验和知识值得分享给大家,也可以通过我们的能力和经验解答大家在大模型的学习中的很多困惑。

我整理出这套 AI 大模型突围资料包:

  • ✅AI大模型学习路线图
  • ✅Agent行业报告
  • ✅100集大模型视频教程
  • ✅大模型书籍PDF
  • ✅DeepSeek教程
  • ✅AI产品经理入门资料

完整的大模型学习和面试资料已经上传带到CSDN的官方了,有需要的朋友可以扫描下方二维码免费领取【保证100%免费】👇👇
​​

为什么说现在普通人就业/升职加薪的首选是AI大模型?

人工智能技术的爆发式增长,正以不可逆转之势重塑就业市场版图。从DeepSeek等国产大模型引发的科技圈热议,到全国两会关于AI产业发展的政策聚焦,再到招聘会上排起的长队,AI的热度已从技术领域渗透到就业市场的每一个角落。


智联招聘的最新数据给出了最直观的印证:2025年2月,AI领域求职人数同比增幅突破200%,远超其他行业平均水平;整个人工智能行业的求职增速达到33.4%,位居各行业榜首,其中人工智能工程师岗位的求职热度更是飙升69.6%。

AI产业的快速扩张,也让人才供需矛盾愈发突出。麦肯锡报告明确预测,到2030年中国AI专业人才需求将达600万人,人才缺口可能高达400万人,这一缺口不仅存在于核心技术领域,更蔓延至产业应用的各个环节。

​​

资料包有什么?

①从入门到精通的全套视频教程⑤⑥

包含提示词工程、RAG、Agent等技术点

② AI大模型学习路线图(还有视频解说)

全过程AI大模型学习路线

③学习电子书籍和技术文档

市面上的大模型书籍确实太多了,这些是我精选出来的

④各大厂大模型面试题目详解

⑤ 这些资料真的有用吗?

这份资料由我和鲁为民博士共同整理,鲁为民博士先后获得了北京清华大学学士和美国加州理工学院博士学位,在包括IEEE Transactions等学术期刊和诸多国际会议上发表了超过50篇学术论文、取得了多项美国和中国发明专利,同时还斩获了吴文俊人工智能科学技术奖。目前我正在和鲁博士共同进行人工智能的研究。

所有的视频教程由智泊AI老师录制,且资料与智泊AI共享,相互补充。这份学习大礼包应该算是现在最全面的大模型学习资料了。

资料内容涵盖了从入门到进阶的各类视频教程和实战项目,无论你是小白还是有些技术基础的,这份资料都绝对能帮助你提升薪资待遇,转行大模型岗位。


智泊AI始终秉持着“让每个人平等享受到优质教育资源”的育人理念‌,通过动态追踪大模型开发、数据标注伦理等前沿技术趋势‌,构建起"前沿课程+智能实训+精准就业"的高效培养体系。

课堂上不光教理论,还带着学员做了十多个真实项目。学员要亲自上手搞数据清洗、模型调优这些硬核操作,把课本知识变成真本事‌!

​​​​

如果说你是以下人群中的其中一类,都可以来智泊AI学习人工智能,找到高薪工作,一次小小的“投资”换来的是终身受益!

应届毕业生‌:无工作经验但想要系统学习AI大模型技术,期待通过实战项目掌握核心技术。

零基础转型‌:非技术背景但关注AI应用场景,计划通过低代码工具实现“AI+行业”跨界‌。

业务赋能 ‌突破瓶颈:传统开发者(Java/前端等)学习Transformer架构与LangChain框架,向AI全栈工程师转型‌。

👉获取方式:

😝有需要的小伙伴,可以保存图片到wx扫描二v码免费领取【保证100%免费】🆓**

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/4/26 18:04:23

【Open-AutoGLM自动化测试揭秘】:它真能一键搞定App全链路测试吗?

第一章:Open-AutoGLM能对某个app进行测试吗Open-AutoGLM 是一个基于大语言模型的自动化测试框架,专为移动应用和Web应用的智能测试设计。它能够解析应用界面结构,自动生成测试用例,并模拟用户行为执行功能验证。该工具支持 Androi…

作者头像 李华
网站建设 2026/5/1 5:46:30

揭秘macOS下Open-AutoGLM部署全流程:5步实现本地AI推理自由

第一章:揭秘macOS下Open-AutoGLM部署全流程:5步实现本地AI推理自由在macOS系统上部署Open-AutoGLM,可实现无需云端依赖的本地大模型推理能力。整个过程涵盖环境准备、依赖安装、模型拉取、服务启动与客户端调用五个核心步骤,适合开…

作者头像 李华
网站建设 2026/5/1 4:51:03

(vLLM + Open-AutoGLM = 王炸组合)?实测性能提升背后的真相

第一章:vLLM Open-AutoGLM 架构融合的背景与意义随着大语言模型(LLM)在自然语言处理领域的广泛应用,高效推理与自动化建模成为工业界和学术界共同关注的核心问题。传统推理框架在面对千亿级参数模型时,常面临显存占用…

作者头像 李华
网站建设 2026/4/17 14:05:54

【AI推理加速秘籍】:基于Linux的Open-AutoGLM调优核心技术曝光

第一章:Open-AutoGLM在Linux环境下的核心价值Open-AutoGLM 是一款面向自动化自然语言处理任务的开源框架,专为高性能推理与模型微调设计,在 Linux 环境中展现出卓越的稳定性与扩展能力。其核心价值体现在对本地化部署、资源调度优化以及多模态…

作者头像 李华
网站建设 2026/4/25 16:57:37

医学论文案例:好写作AI在实证研究中的辅助实践

“P值小于0.05,但如何用清晰、专业的语言将这一发现转化为具有临床意义的论述?”这是每位医学研究者在论文写作中必须跨越的沟壑。本文将通过一项真实的临床试验回顾性研究案例,解析好写作AI如何成为严谨医学写作中的高效辅助伙伴。好写作AI官…

作者头像 李华
网站建设 2026/5/1 7:46:40

TensorFlow在招聘简历筛选中的智能匹配

TensorFlow在招聘简历筛选中的智能匹配 在企业每年面对成千上万份简历投递的今天,HR如何在有限时间内快速识别出真正匹配岗位的候选人?传统依赖关键词检索和人工阅读的方式早已不堪重负——不仅效率低下,还容易因主观判断导致优质人才被误筛…

作者头像 李华