RAG是目前最主流的破解方案不改模型而是在回答之前先去知识库里把相关信息捞出来跟问题一起喂给LLM。LLM从万事通变成了带参考资料的答题者。上篇我们搞清了一件事LLM的知识边界就是训练数据的边界。超出这个边界它不会说不知道而是硬编。解决方案不是训练更大的模型而是给它接上外部知识来源。RAG就是做这件事的。全称Retrieval-Augmented Generation检索增强生成。名字挺唬人拆开看其实就两步先搜再答。考试时旁边多了个图书馆最直观的理解方式想象你在考试但旁边放了一个图书馆。遇到不会的题可以先去图书馆查相关资料带着资料回来答题。你的角色不再是靠记忆答题而是靠检索信息组织语言来答题。LLM在RAG系统里的角色就是这个考生。它不需要什么都记住但它需要两个能力根据查到的资料准确作答的能力和把多条信息整合成流畅回答的能力。这恰好是LLM最擅长的事。图书馆怎么建先说知识库图书馆是怎么建出来的。企业的原始知识通常散落在各种PDF、Word文档、网页、数据库里。要把这些变成LLM可以使用的知识库核心步骤是一条流水线。格式统一——先把各种格式的文件都转成纯文本。PDF里可能有图片和表格这一步本身就充满挑战。很多团队卡在第一步就是因为原始文档太杂。文本分割——长文档切成小段。一篇几千字的产品手册不能整篇塞给LLM需要切成几百字的小块每块包含一个相对完整的信息片段。切得太粗信息混杂切得太细上下文丢失。文本分割是整条链路中最影响最终效果但最容易被忽视的环节。向量化——上篇讲的Embedding派上用场了。每个文本小块通过Embedding模型转成一个向量存进向量数据库。到这里知识库就建好了。查资料的过程用户问了一个问题。系统先把这个问题也通过同一个Embedding模型转成向量然后到向量数据库里做相似度检索——找到跟问题向量最接近的几条文本块。这几条文本块就是从图书馆里查出来的参考资料。然后系统把用户的问题和这些参考资料一起塞进一个Prompt模板已知信息是XXX请根据这些已知信息回答以下问题如果信息不足请说无法回答禁止编造。LLM拿到这个Prompt有了参考资料做支撑回答的准确度就会大幅提升。有人做过一个直观的对比实验同一个LLMChatGLM不接知识库的时候问阿里云数据库的产品信息回答错误百出。接上知识库之后哪怕只灌入一篇产品文档回答就变得精准且专业。模型没变变的是输入。效果好不好关键在三个环节RAG系统的整体效果取决于一条链路上的每个环节而不只是LLM本身。很多时候效果不好不是大模型不行是上游出了问题。文本分割质量。切得不好相关信息被切断或者噪声混入检索出来的内容就不对LLM拿到错误的参考资料自然答不好。Embedding模型的匹配度。上篇说过Embedding模型跟训练领域强相关。用户问的问题和知识库里的答案经过Embedding之后如果向量不相近检索就失灵。这是实际应用中最普遍的痛点。LLM本身的能力。在前两步都OK的情况下LLM的摘要、推理和语言组织能力决定了最终回答的质量。但如果前两步就拉胯了换再强的LLM也救不回来。我跟做知识库产品的人聊得越多越确信一件事RAG系统的瓶颈很少在大模型上绝大多数都在数据处理和Embedding这两步。但大家的注意力和预算往往都花在选哪个大模型上。这是典型的盯着最亮的灯看忽略了真正坏掉的水管。RAG不是万能的坦诚说几个RAG目前搞不定或者很难搞好的场景。用户的问题可能需要跨多个文档甚至多个系统才能回答。比如一个问题的答案散落在三份不同的PDF和一个数据库表里单靠向量检索很难把碎片拼完整。有些问题的答案压根不存在于文档中——它需要推理、计算或者调用外部系统。比如用户问最近一个月的销售趋势这需要查数据库做计算知识库里放的静态文档帮不上忙。RAG最适合的场景是答案确实存在于已有文档中用户的问法跟文档的表述足够接近Embedding能把两者关联起来。超出这个范围就需要更复杂的方案了——比如下一篇要讲的MCP。小结RAG的核心逻辑就一句话不让LLM凭记忆答题先帮它把参考资料查好。知识准确性靠检索保障语言表达靠LLM发挥。以后评估任何RAG产品或方案的时候按这条链路逐段检查原始数据质量→文本分割策略→Embedding模型选择→检索准确率→LLM生成质量。哪个环节弱整体效果就被那个环节锁死。学AI大模型的正确顺序千万不要搞错了2026年AI风口已来各行各业的AI渗透肉眼可见超多公司要么转型做AI相关产品要么高薪挖AI技术人才机遇直接摆在眼前有往AI方向发展或者本身有后端编程基础的朋友直接冲AI大模型应用开发转岗超合适就算暂时不打算转岗了解大模型、RAG、Prompt、Agent这些热门概念能上手做简单项目也绝对是求职加分王给大家整理了超全最新的AI大模型应用开发学习清单和资料手把手帮你快速入门学习路线:✅大模型基础认知—大模型核心原理、发展历程、主流模型GPT、文心一言等特点解析✅核心技术模块—RAG检索增强生成、Prompt工程实战、Agent智能体开发逻辑✅开发基础能力—Python进阶、API接口调用、大模型开发框架LangChain等实操✅应用场景开发—智能问答系统、企业知识库、AIGC内容生成工具、行业定制化大模型应用✅项目落地流程—需求拆解、技术选型、模型调优、测试上线、运维迭代✅面试求职冲刺—岗位JD解析、简历AI项目包装、高频面试题汇总、模拟面经以上6大模块看似清晰好上手实则每个部分都有扎实的核心内容需要吃透我把大模型的学习全流程已经整理好了抓住AI时代风口轻松解锁职业新可能希望大家都能把握机遇实现薪资/职业跃迁这份完整版的大模型 AI 学习资料已经上传CSDN朋友们如果需要可以微信扫描下方CSDN官方认证二维码免费领取【保证100%免费】