国内环境搭建私有知识问答库踩坑记录(ollama+deepseek+ragflow)

本文主要是介绍国内环境搭建私有知识问答库踩坑记录(ollama+deepseek+ragflow),希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

《国内环境搭建私有知识问答库踩坑记录(ollama+deepseek+ragflow)》本文给大家利用deepseek模型搭建私有知识问答库的详细步骤和遇到的问题及解决办法,感兴趣的朋友一起看看吧...

最近B站上看到不少关于利用deepseek模型搭建私有知识问答库的视频,讲的都很好,不过在我实际去操作时,还是遇到很多问题,花了两天时间才一一搞定,在此分享一下,方便大家避坑,如果有其他问题也欢迎发在文章评论区中一起讨论。

关于整个搭建流程,在此我就不详细展示,大家也可以看完他们的视频再尝试去搭建一下,如果遇到问题,再回头看看这篇文章看能不能找到答案,本篇文章我们着重讲一下我遇到的问题和解决办法:

搭建的主要步骤如下:

1. 下载ollama 安装
2. OLLAMA_HOST 0.0.0.0:11434  OLLAMA_MODELS  E:\ollama\modules ,重启电脑
3. 在cmd中 运行命令ollama run deepseek-r1:1.5b
4. 安装docker desktop  , 修改国内镜像源
5. 下载ragFlow 源码工程
6. 进入源码工程,修改配置文件 ragflow-main\docker\.env 注释掉84行,打开115和122行注释
7. 在ragFlow 源码工程 根目录执行命令 docker compose -f docker/docker-compose.yml up -d
8. 浏览器中访问 localhost:80 

BTY:上面步骤中需要下载3个东西, ollama exe安装包,ragFlow 源码工程以及docker desktop

docker desktop 大家登录官网就可以下载到, ollama安装包和ragFlow 源码工程在我分享的资源,《搭建私有AIGC知识问答域 ollama0+ragflow-main》,百度网盘下载地址如下:

链接: https://pan.baidu.com/s/114iqfr1mqandroid4FE2RK_b0bO8w?pwd=285r

提取码: 285r 

《搭建私有AIGC知识问答域 ollama0+ragflow-main》

下面说一下注意点:

1. 第1步大家在安装完ollama后,需要到系统环境变量中添加两个变量

OLLAMA_HOST   值       0.0.0.0:11434

OLLAMA_MODELS  值      E:\ollama\modules

其中 OLLAMA_MODELS 值大家可以自己定义到空间较大的一个盘符,主要是避免后期如果下载模型比较大,将默认安装的C盘撑满,在配置好这两个环境变量后需要重启一下电脑,原因是B站一个小姐姐分享时说,如果此时不重启,等下载完模型,以后再重启的话,之前下载的模型会随风消逝,这点我没试过,既然能避免,就没必要浪费时间去体验了,我就照做了。这样我们上面1,2 两步就完成了

2. 第3步 “在cmd中 运行命令 ollama run deepseek-r1:1.5b”

大家可以登录ollama 官网 Ollama

选择模型进行下载,现在deepseek 模型恰好就在第一位,如果不在搜索一下即可。

国内环境搭建私有知识问答库踩坑记录(ollama+deepseek+ragflow)

国内环境搭建私有知识问答库踩坑记录(ollama+deepseek+ragflow)

ollama run deepseek-r1:1.5b 关于这条命令大家可以按照上面两幅图步骤操作,选择好模型复制即可。如果大家只是体验一把功能,选择1.5b即可,如果大家财力雄厚,有NVIDIA 显卡,可以挑战一把 671b的模型。

注:我在这步时之前遇到过一个问题,就是执行 ollama run deepseek-r1:1.5b 命令后中途断掉了,但是后续再执行时一直报服务 500错误,解决办法就是将 ollama run deepseek-r1:1.5b 修改为 ollama pull deepseek-r1:1.5b 就可以正常拉取了。后续操作不影响

3. 第4步 “安装docker desktop  , 修改国内镜像源”

关于这个步骤有两python点需要说明:

3.1. 安装docker desktop

由于desktop默认是安装在C盘的,但是后面在下载镜像时不出意外很快就会将C盘撑满,一直提示空间不足,在后面步骤要同步的rwww.chinasem.cnagFlow镜像就有20多G,所以此处最好在安装docker desktop之前做一下盘符映射,将C盘docker目录映射出去,在cmd中执行如下4条命令:

注:在执行命令之前要先建立其他盘符对应的目录, 此时C盘中也不能存在docker对应的目录,如果以前已经安装过,需要先保存备份数据,再卸载 docker desktop , 将C盘对应的下面4个docker 目录删除,再执行

mklink /j "C:\Program Files\Docker" "F:\myDocker\Docker"
mklink /j "C:\Users\Administrator\AppData\Local\Docker" "F:\myDocker\Docker\Local"
mklink /j "C:\Users\Administrator\AppData\Roaming\Docker" "F:\myDocker\Docker\Roaming\Docker"
mklink /j "C:\Users\Administrator\AppData\Roaming\Docker Desktop" "F:\myDocker\Docker\Roaming\Docker Desktop"

执行命令之后C盘中对应的docker目录就会变成快捷方式图标

国内环境搭建私有知识问答库踩坑记录(ollama+deepseek+ragflow)

3.2. 镜像源:

如果大家会科学上网,可以跳过此步骤,在编写文章时,下面国内镜像源还是可以使用的:

"registry-mirrors": [
    "https://hub.rat.dev",
    "https://docker.m.daocloud.io",
    "https://docker.1panel.androidlive/",
    WgIinLih"https://docker.hpcloud.cloud",
    "https://docker.m.daocloud.io",
    "https://docker.unsee.tech",
    "https://docker.1panel.live",
    "http://mirrors.ustc.edu.cn",
    "https://docker.chenby.cn",
    "http://mirror.azure.cn",
    "https://dockerpull.org",
    "https://dockerhub.icu",
    "https://hub.rat.dev"
  ]

将上面镜像源配置到docker desktop 中,要满足json语法格式,点击应用重启docker desktop,如下图:

国内环境搭建私有知识问答库踩坑记录(ollama+deepseek+ragflow)

4. 第5步  “下载ragFlow 源码工程”

4.1 在下载好ragFlow 源码工程后需要修改配置文件

配置文件目录: ragflow-main\docker\.env

4.1.1 会科学上网:

国内环境搭建私有知识问答库踩坑记录(ollama+deepseek+ragflow)

打开87行,注释掉84行, 87会自动下载包含embedding 模型的库, 84行则下载简化库。

4.1.2 不会科学上网

注释掉84行,87行, 打开 115行和122行, 第115行时国内华为镜像

国内环境搭建私有知识问答库踩坑记录(ollama+deepseek+ragflow)

5. 第7 步执行命令行

5.1 执行此命令行之前需要打开 docker desktop

5.2  保存镜像的磁盘空间要大于25G

我遇到的问题就是报空间不足,修改了很多目录还是又问题,最后通过3.1 中的方式才将问题解决。

在工程根目录执行:docker compose -f docker/docker-compose.yml up -d

执行完以上步骤如果没报错的话,就可以在浏览器中访问 localhost:80 了

在进入ragFlow 界面后进行用户注册,加载deepseek 模型,具体步骤可以先参考B站视频,后面有啥问题,还会继续分享。

6. 在聊天中问题长时间没响应

经过几天的尝试,这个问题最终解决,不是任何软件问题,是硬件问题,把以前16G内存缓存32G的就解决了,图片如下:

国内环境搭建私有知识问答库踩坑记录(ollama+deepseek+ragflow)

注:修改docker desktop 占用内存方法,进入 C:\Users\{自己用户名}

新建一个文件 .wslconfig ,内容添加

[wsl2]
memory=16GB 

最后记得重启docker desktop

补充一下:在添加LLM时,我的基础URL 填的是 http://host.docker.internal:11434

 最大token数,如果硬件不强悍的话,写的小一点比如512,写多了会很慢。

国内环境搭建私有知识问答库踩坑记录(ollama+deepseek+ragflow)

到此这篇关于国内环境搭建私有知识问答库踩坑记录(ollama+deepseek+ragflow)的文章就介绍到这了,更多相关ollama deepseek ragflow知识问答库内容请搜索China编程(www.chinasem.cn)以前的文章或继续浏览下面的相关文章希望大家以后多多支持编程China编程(www.chinasem.cn)!

这篇关于国内环境搭建私有知识问答库踩坑记录(ollama+deepseek+ragflow)的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1153731

相关文章

统一返回JsonResult踩坑的记录

《统一返回JsonResult踩坑的记录》:本文主要介绍统一返回JsonResult踩坑的记录,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录统一返回jsonResult踩坑定义了一个统一返回类在使用时,JsonResult没有get/set方法时响应总结统一返回

Go学习记录之runtime包深入解析

《Go学习记录之runtime包深入解析》Go语言runtime包管理运行时环境,涵盖goroutine调度、内存分配、垃圾回收、类型信息等核心功能,:本文主要介绍Go学习记录之runtime包的... 目录前言:一、runtime包内容学习1、作用:① Goroutine和并发控制:② 垃圾回收:③ 栈和

java对接海康摄像头的完整步骤记录

《java对接海康摄像头的完整步骤记录》在Java中调用海康威视摄像头通常需要使用海康威视提供的SDK,下面这篇文章主要给大家介绍了关于java对接海康摄像头的完整步骤,文中通过代码介绍的非常详细,需... 目录一、开发环境准备二、实现Java调用设备接口(一)加载动态链接库(二)结构体、接口重定义1.类型

python获取cmd环境变量值的实现代码

《python获取cmd环境变量值的实现代码》:本文主要介绍在Python中获取命令行(cmd)环境变量的值,可以使用标准库中的os模块,需要的朋友可以参考下... 前言全局说明在执行py过程中,总要使用到系统环境变量一、说明1.1 环境:Windows 11 家庭版 24H2 26100.4061

如何搭建并配置HTTPD文件服务及访问权限控制

《如何搭建并配置HTTPD文件服务及访问权限控制》:本文主要介绍如何搭建并配置HTTPD文件服务及访问权限控制的问题,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录一、安装HTTPD服务二、HTTPD服务目录结构三、配置修改四、服务启动五、基于用户访问权限控制六、

pytest+allure环境搭建+自动化实践过程

《pytest+allure环境搭建+自动化实践过程》:本文主要介绍pytest+allure环境搭建+自动化实践过程,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐... 目录一、pytest下载安装1.1、安装pytest1.2、检测是否安装成功二、allure下载安装2.

使用vscode搭建pywebview集成vue项目实践

《使用vscode搭建pywebview集成vue项目实践》:本文主要介绍使用vscode搭建pywebview集成vue项目实践,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地... 目录环境准备项目源码下载项目说明调试与生成可执行文件核心代码说明总结本节我们使用pythonpywebv

VS配置好Qt环境之后但无法打开ui界面的问题解决

《VS配置好Qt环境之后但无法打开ui界面的问题解决》本文主要介绍了VS配置好Qt环境之后但无法打开ui界面的问题解决,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要... 目UKeLvb录找到Qt安装目录中designer.UKeLvBexe的路径找到vs中的解决方案资源

apache的commons-pool2原理与使用实践记录

《apache的commons-pool2原理与使用实践记录》ApacheCommonsPool2是一个高效的对象池化框架,通过复用昂贵资源(如数据库连接、线程、网络连接)优化系统性能,这篇文章主... 目录一、核心原理与组件二、使用步骤详解(以数据库连接池为例)三、高级配置与优化四、典型应用场景五、注意事

SpringBoot实现文件记录日志及日志文件自动归档和压缩

《SpringBoot实现文件记录日志及日志文件自动归档和压缩》Logback是Java日志框架,通过Logger收集日志并经Appender输出至控制台、文件等,SpringBoot配置logbac... 目录1、什么是Logback2、SpringBoot实现文件记录日志,日志文件自动归档和压缩2.1、