RAG项目实战

2024-09-03 17:36
文章标签 实战 项目 rag

本文主要是介绍RAG项目实战,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

引言

今天给粉丝带来福利,报名学习得现金奖励!!!

项目实战

😊 一共9节课,每节课记录笔记打卡,100%获得🧧199元现金🧧!!没有数量限制!!! 还送书~~~

大语言模型 (LLMs) 的应用面临的挑战有:领域知识的缺乏、信息准确性问题以及生成的虚假内容等。

检索增强生成 (RAG) 技术通过引入外部知识库等额外信息源,将传统信息检索技术与大语言模型技术相结合,为以上 LLMs 问题提供了全新的解决方案。

RAG 在多数任务中表现十分完美,但是在深度应用还有很多挑战。不过这也为算法工程师和科研人员提供了更多的研究和突破机会!

RAG 研究的发展趋势

扫描二维码了解详情 / 报名(送书👇)

😊 课程一共9节课,每节课记录笔记打卡,100%获得🧧199元现金🧧!!没有数量限制!!!还送书~~~
扫码 备注 csdn rag 报名送书

从零构建一个功能完备的 RAG 项目

为了让想进入大模型研究领域的同学顺利入门!理解 RAG 的基本概念和工作流程,掌握 RAG 模型的构建与应用,研梦非凡推出 《RAG 技术深入分析与实践》实战训练营! 让同学们都能动手实战构建一个功能完备的 RAG 项目。本课程适合以下同学:

  1. 对大模型感兴趣、希望学习如何使用 Langchain 构建高效的 RAG 系统的前后端开发工程师、算法工程师;

  2. 对大模型应用感兴趣、对编程有一定基础、想进入大模型行业发展的在读本硕博学生!0 基础也可!

课程收获

  1. 理解 RAG 的基本概念和工作流程,掌握 RAG 模型的构建与应用;

  2. 精通 Langchain 的核心功能,包括如何部署 Langfuse、Milvus、LLM、Embedding;

  3. 学会从多种数据源加载文档,并运用 Text Splitters 进行有效文本处理;

  4. 掌握检索器的工作机制及其与向量存储的集成方法;

  5. 能够评估 RAG 系统的有效性,并进行相应的优化与改进;

  6. 实战构建一个功能完备的 RAG 项目,主要应用点有 Milvus 向量库、OpenAI 接口兼容的 LLM、部署嵌入和重排序模型、上网搜索能力、最后应用 Langfuse 进行跟踪。

《RAG 技术深入分析与实践》实战训练营课程大纲

第一节:RAG 简介(8 月 29 号)

  1. RAG 核心概念

  2. RAG 流水线 (调用 SiliconCloud)

  3. 快速开始

第二节:Langchain 基础(9 月 5 号)

  1. Langfuse 部署

  2. Document

  3. Runnable 接口

    • PromptTemplate

    • ChatModel

    • OutputParser

    • Retriever

    • OutputParser

第三节:Retrieval 基础

  1. Document loaders

    • 加载 CSV 数据

    • 加载 HTML 数据

    • 加载 Markdown 数据

    • 加载 PDF 文件

    • 加载 URL

  2. Text Splitters

    • 递归拆分文本

    • 拆分 HTML

    • 按字符拆分

    • 拆分代码

    • 按语义相似度拆分

  3. Text embedding models

    • 自定义嵌入模型

第四节:检索器与 LCEL

  1. Vector stores

    • 常见向量库的比较
  2. Retrievers

  3. LangChain Expression Language

第五节:RAG 的评估

  1. RAGAs

  2. 评估指标

    • 忠实度 (Faithfulness)

    • 答案相关性 (Answer relevancy)

    • 上下文精度 (Context precision)

    • 上下文召回率 (Context recal)

    • 上下文相关性 (Context relevancy)

  3. 评估实战

第六节:高级 RAG(1)

  1. MultiQueryRetriever

  2. Contextual Compression Retriever

  3. SelfQueryRetriever

  4. MultiVectorRetriever

  5. EnsembleRetriever

第七节:高级 RAG(2)

  1. ParentDocumentRetriever

  2. Hypothetical Queries

  3. Hybrid Search

  4. Rerank

  5. Long-Context Reorder

第八节:RAG 项目实战 (1)

  1. Milvus 向量库对接

  2. LangGPT 提示语言

  3. 增加记忆

第九节:RAG 项目实战 (2)

  1. 查询重写

  2. 增加上网功能

  3. 简单前端实现

  4. 总结

报名即送 价值 99 元大模型必读书籍《文本数据挖掘》(第 2 版),清华大学出版社出版,ACL/CAAI/CCFFellow、中国科学院大学教授著。

这篇关于RAG项目实战的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1133589

相关文章

SpringBoot项目中报错The field screenShot exceeds its maximum permitted size of 1048576 bytes.的问题及解决

《SpringBoot项目中报错ThefieldscreenShotexceedsitsmaximumpermittedsizeof1048576bytes.的问题及解决》这篇文章... 目录项目场景问题描述原因分析解决方案总结项目场景javascript提示:项目相关背景:项目场景:基于Spring

解决Maven项目idea找不到本地仓库jar包问题以及使用mvn install:install-file

《解决Maven项目idea找不到本地仓库jar包问题以及使用mvninstall:install-file》:本文主要介绍解决Maven项目idea找不到本地仓库jar包问题以及使用mvnin... 目录Maven项目idea找不到本地仓库jar包以及使用mvn install:install-file基

springboot项目如何开启https服务

《springboot项目如何开启https服务》:本文主要介绍springboot项目如何开启https服务方式,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录springboot项目开启https服务1. 生成SSL证书密钥库使用keytool生成自签名证书将

将Java项目提交到云服务器的流程步骤

《将Java项目提交到云服务器的流程步骤》所谓将项目提交到云服务器即将你的项目打成一个jar包然后提交到云服务器即可,因此我们需要准备服务器环境为:Linux+JDK+MariDB(MySQL)+Gi... 目录1. 安装 jdk1.1 查看 jdk 版本1.2 下载 jdk2. 安装 mariadb(my

Python列表去重的4种核心方法与实战指南详解

《Python列表去重的4种核心方法与实战指南详解》在Python开发中,处理列表数据时经常需要去除重复元素,本文将详细介绍4种最实用的列表去重方法,有需要的小伙伴可以根据自己的需要进行选择... 目录方法1:集合(set)去重法(最快速)方法2:顺序遍历法(保持顺序)方法3:副本删除法(原地修改)方法4:

在Spring Boot中浅尝内存泄漏的实战记录

《在SpringBoot中浅尝内存泄漏的实战记录》本文给大家分享在SpringBoot中浅尝内存泄漏的实战记录,结合实例代码给大家介绍的非常详细,感兴趣的朋友一起看看吧... 目录使用静态集合持有对象引用,阻止GC回收关键点:可执行代码:验证:1,运行程序(启动时添加JVM参数限制堆大小):2,访问 htt

Node.js 数据库 CRUD 项目示例详解(完美解决方案)

《Node.js数据库CRUD项目示例详解(完美解决方案)》:本文主要介绍Node.js数据库CRUD项目示例详解(完美解决方案),本文给大家介绍的非常详细,对大家的学习或工作具有一定的参考... 目录项目结构1. 初始化项目2. 配置数据库连接 (config/db.js)3. 创建模型 (models/

springboot项目中常用的工具类和api详解

《springboot项目中常用的工具类和api详解》在SpringBoot项目中,开发者通常会依赖一些工具类和API来简化开发、提高效率,以下是一些常用的工具类及其典型应用场景,涵盖Spring原生... 目录1. Spring Framework 自带工具类(1) StringUtils(2) Coll

Spring Boot项目部署命令java -jar的各种参数及作用详解

《SpringBoot项目部署命令java-jar的各种参数及作用详解》:本文主要介绍SpringBoot项目部署命令java-jar的各种参数及作用的相关资料,包括设置内存大小、垃圾回收... 目录前言一、基础命令结构二、常见的 Java 命令参数1. 设置内存大小2. 配置垃圾回收器3. 配置线程栈大小

Spring Boot项目中结合MyBatis实现MySQL的自动主从切换功能

《SpringBoot项目中结合MyBatis实现MySQL的自动主从切换功能》:本文主要介绍SpringBoot项目中结合MyBatis实现MySQL的自动主从切换功能,本文分步骤给大家介绍的... 目录原理解析1. mysql主从复制(Master-Slave Replication)2. 读写分离3.