趋近智
检索增强生成 (RAG) 入门
章节 1: 检索增强生成技术简介
标准大型语言模型的局限性
什么是检索增强生成（RAG）？
RAG系统的核心架构
RAG 对比微调：理解其差异
使用RAG的优势
章节 2: 检索组件
检索器在 RAG 中的作用
向量嵌入简介
常用嵌入模型
相似性搜索：查找相关向量
向量数据库简介
选择向量数据库：考量因素
实践：生成文本嵌入
章节 3: 准备检索所需数据
从不同来源加载文档
文档分块的必要性
固定大小分块策略
内容感知的分块方法
数据块的元数据关联
将处理后的数据存储到向量数据库中
动手实践：文档分块
章节 4: 生成模块与增强
生成器（LLM）在RAG中的作用
RAG提示词的结构化
上下文注入方法
管理上下文长度限制
生成最终回复
生成内容中的来源归属
章节 5: 搭建一个基本RAG流程
RAG 框架概述 (例如 LangChain、LlamaIndex)
环境配置
实现检索器
实现生成器集成
结合检索与生成
在流程中执行查询
动手实践：端到端RAG系统
章节 6: RAG系统的评估与改进
评估RAG的挑战
组件层面的评估：检索
组件级别评估：生成
端到端RAG评估框架
常见故障模式
改进的基本策略
实践：分析RAG输出质量
将处理后的数据存储到向量数据库中
这部分内容有帮助吗？
- Sentence-BERT: Sentence Embeddings using Siamese BERT-Networks, Nils Reimers and Iryna Gurevych, 2019 Proceedings of the 2019 Conference on Empirical Methods in Natural Language Processing and the 9th International Joint Conference on Natural Language Processing (EMNLP-IJCNLP) DOI: 10.18653/v1/D19-1410 - 介绍Sentence-BERT，一个生成语义丰富的句子嵌入的模型，适合进行相似性比较，这是为向量数据库准备数据的核心技术。
- Efficient and Robust Approximate Nearest Neighbor Search Using Hierarchical Navigable Small World Graphs, Yu. A. Malkov, D. A. Yashunin, 2020 IEEE Transactions on Pattern Analysis and Machine Intelligence, Vol. 42 (IEEE) DOI: 10.1109/TPAMI.2018.2889473 - 描述HNSW算法，这是一种在高维空间中高效进行近似最近邻搜索的常用方法，是许多向量数据库的核心组成部分。
- Weaviate Concepts: Vector Database, Weaviate Team, 2024 (Weaviate) - 官方文档，清晰解释了向量数据库的架构、功能及其在语义搜索和RAG中的应用。
- Vector Embeddings: Applications, Architecture, and Best Practices in Machine Learning, Nikhil Daniel, Shubham Sarma, 2023 (O'Reilly Media) - 一本书籍，全面介绍向量嵌入，包括其生成、存储和检索，适用于语义搜索和各种机器学习应用。