news 2026/9/4 5:01:13

双非AI求职备战 Day 4-10:为校园AI助手装上“知识大脑“(RAG实战)

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
双非AI求职备战 Day 4-10:为校园AI助手装上“知识大脑“(RAG实战)

什么是RAG,为什么要用RAG

RAG 定义

RAG = Retrieval-Augmented Generation,检索增强生成简单一句话:先检索、再生成。 大模型本身有固定的训练知识库,存在知识滞后、不知道你的私有资料(中北大学校园资料);RAG 把本地私有文档(你的校园 FAQ、校情介绍、培养方案)向量化存入向量数据库。用户提问时:

  1. 把用户问题转为向量,去向量库检索最相关的片段(检索阶段)
  2. 将检索出来的参考资料连同用户问题一起塞给大模型
  3. 大模型基于给的参考资料来组织语言回答(生成阶段)
  4. 私有知识:GLM 大模型的训练数据里没有最新中北选课、图书馆、校内通知这类专属校园资料,不做 RAG 它会瞎编。
  5. 减少幻觉:强制 AI 必须基于提供的文档回答,没有资料就回答 “暂无相关信息”,不能编造。
  6. 低成本:不用微调大模型,只准备文本知识库,节省算力和时间,非常适合毕设。
  7. 可更新:校园政策变了,只需要更新 txt 知识库,重建向量库,不用重新训练模型。
  8. 控制上下文长度:不会一次性把全部校园文档丢给大模型,只把和问题相关的片段传入,节省 token、降低接口费用。

如何准备和清洗校园数据

校园数据是 RAG 系统的知识底座,数据质量直接决定回答效果。建议从以下三个维度准备和清洗:

  • 数据来源:优先收集教务处选课通知、图书馆开放时间、校历、培养方案、校园 FAQ 等官方文档,确保信息权威、口径统一。
  • 清洗要点:去除页眉页脚、广告和重复段落;统一日期、时间、地点等格式;对 PDF 转文本产生的乱码和多余换行做归一化处理。
  • 组织方式:按主题拆分文档(如选课、宿舍、图书馆),每个主题下保留完整语义段落,便于后续按块切分时保持上下文连贯。

文本分割的技巧(chunk_size、chunk_overlap 怎么调)

文本分割直接影响检索召回质量,建议按以下思路调参:

  • chunk_size:一般从 200 到 500 字起步。校园问答多为短句,建议先用 300 字左右测试,再根据回答完整度微调。
  • chunk_overlap:建议设为 chunk_size 的 10% 到 20%,避免关键信息恰好被切在边界上导致漏检。
  • 验证方法:准备一组典型校园问题,逐个检查检索结果是否命中正确答案,据此反向调整参数。

中文嵌入模型的选择(为什么用 paraphrase-multilingual-MiniLM-L12-v2)

该模型支持中文在内的多种语言,体积小、推理快,适合毕设场景在本地 CPU 上运行。它能把中文问句和校园文档映射到同一向量空间,保证跨语言和同语言检索都能取得稳定效果。

向量检索的原理和效果展示

向量检索的核心是把用户问题编码为向量,再与知识库中的文档向量计算相似度,返回最相关的若干片段。效果展示建议包含:检索命中的原文片段、相似度得分,以及最终生成的回答,方便直观对比不同参数下的表现。

踩坑记录(编码问题?模型下载太慢?)

常见问题包括:读取 txt 时中文乱码(建议统一用 UTF-8 编码)、模型首次下载较慢(可提前下载到本地缓存)、向量库重建耗时(建议增量更新而非全量重建)。把这些坑记录下来,既能帮助自己排查,也能让读者少走弯路。

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/9/4 4:59:44

逐步优化算法(POA)在水库调度中的应用:原理、实现与工程实践

简介:本资源是面向水利水电、水资源系统工程及智能优化算法研究者的POA(逐步优化算法)实践代码包,聚焦水库优化调度这一典型多约束、多目标复杂决策问题。压缩包共40个文件,含2个核心C源码(POA.cpp、test.c…

作者头像 李华
网站建设 2026/9/4 4:56:32

从Ask征集到内容引擎:创作者如何系统化激发社区互动与创作灵感

1. 先搞清楚“Ask征集”到底在做什么,以及为什么值得写看到“征集Ask”这个标题,很多人第一反应可能是“这不就是找人提问吗?有什么技术含量?”。如果你也这么想,那可能就错过了创作者生态里一个非常关键的互动环节。这…

作者头像 李华
网站建设 2026/9/4 4:56:20

秋叶ComfyUI V17中文整合包:一键安装与AI绘画工作流入门指南

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

作者头像 李华
网站建设 2026/9/4 4:53:16

AI Agent进化论:从函数调用到OpenAI与Hugging Face生态之争

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

作者头像 李华
网站建设 2026/9/4 4:51:02

AI Agent技能库设计:给模型发一张科研上岗证

给 AI 发一张“科研上岗证”——这句话最近一直在我脑子里转。很多人看到“163 个技能秒变 AI 科学家”这种标题,第一反应是夸大其词,第二反应是“是不是又来推销模型”。但如果你自己搭过 scientific agent 就会发现,这个说法其实点到了一个…

作者头像 李华
网站建设 2026/9/4 4:50:08

AMD MI355X智能体负载性能快速改善:软件栈迭代与部署实践

最近半导体行业分析机构 SemiAnalysis 的一则报告引起了不少关注:AMD MI355X 在智能体(Agent)负载上的性能,正在以“周”为单位快速改善。如果你正在关注 AI 算力选型、大模型推理部署,或者准备评估 AMD 平台跑智能体任…

作者头像 李华