前两天写了一篇DeepSeek+本地知识库:真的太香了 爆了。
同时大家也提了一些问题,汇总一下大家的问题:
在后面方案里详细地给大家说明。

我简单地梳理了下流程。理想的情况下:
共同点:
高精度要求建议自己写程序处理,更准确一些,能解决索引质量和信息丢失的问题 因为每个企业的知识结构和习惯不一样,大家处理数据的方式也会有差别,这个需要好好的调试。 这里注意的是需要记录下每篇知识向量化后的id,以及对应的版本或时间戳,方便后续删除向量数据。 deepseek给的方案是
分段优化三原则:
▸ 语义完整性校验(BERTScore>0.85)
▸ 动态重叠窗口(建议15%-20%文本长度)
▸ 关键实体锚点锁定(使用spaCy实体识别)
低精度要求会有一定的丢失概率,直接使用dify或maxKB即可。
具备研发能力的同学,可以看这块。
提示: 实际性能受数据维度、硬件配置(如SSD/NVMe)、索引参数影响强烈,建议通过真实数据基准测试验证。
要求如下:
MaxKB和dify 都可以召回,我们可以通过高级功能,做一个流程来解决问题3。先获取topn的向量,大模型排序,根据规则进行过滤。 deepseek给的解决方案:不知道dify和maxKB如何配置。
① BM25粗筛(Top100)→ ② 向量精排(Top10)→ ③ 元数据过滤
创建应用的时候,可以关联多个知识库,高级应用可以做流程编排。

MaxKB 的智能分段,


创建应用的时候也可以关联多个知识库。可以设置多路召回。


dify中知识库分段和清洗可以自定义设置


资深全栈技术专家 | 互联网领域十年架构沉淀
技术纵深:高并发架构 | 应用调优 | 分布式系统
技术版图:Java/Vue/Go/Python 管理沉淀:8年技术团队建设 | 百万级DAU经验 专注输出:
✓ 架构思维 × 技术管理 × 全栈实战
✓ 新技术应用 × 行业趋势前瞻
创作不易,辛苦大家动动发财的小手。
if 文章有用:点赞()收藏() # 📂 防止迷路,代码永驻关注() # 🔔 追更最新内容else:留言吐槽() # 💬 评论区等你来战
历史文章:
国产AI之光!DeepSeek本地部署教程,效果媲美GPT-4
不要浪费deepseek的算力了,DeepSeek提示词库指南
群已满,关注后,加我微信,我拉大家入群。ps:备注下来源。

最后分享一个福利,最大的AI社群破局星球,最近推出了3天体验卡,我申请到内测资格了。
大家有兴趣可以进去免费看3天,关于ai的各种应用都有。

原文作者:5ycode;如有侵权,请联系管理员删除。