数据活

文档 · 规程 · 知识库:问答与检索

给一个十人班组搭局域网知识库:答案必须能指回原文

不只是接一个问答接口:扫描件表格要重建、答案要能回指原文、还要能指着图问问题

团队知识库检索与问答扫描件重建人工审核

12文档 · 规程 · 知识库:问答与检索给一个十人班组搭局域网知识库:答案必须能指回原文
给一个十人班组搭局域网知识库:答案必须能指回原文
问题
技术文档、规章制度、设备履历台账散在各处;要找一条规定,先得想起它在哪个文件里
需求
一个局域网内可用的知识库:能全文检索、能语义问答、还能指着文档里的图问问题
解决思路
关键信息在图上而不在文字里;而且答案不能指回原文,就没人敢用
方案
统一解析成结构化数据再检索问答,配一条人工审核流水线把关,并建立可复现的评测口径
效果
有一次优化反而让检索质量下降,我把它回退了——凭评测说话,不凭感觉

团队知识库检索与问答扫描件重建人工审核

场景

一个十人班组,技术文档、规章制度、设备台账散在各处。要找一条规定,得先想起它在哪个文件——想不起来只能问人,而同一个人一天可能被问五次

真正的难在哪

难点不在接一个问答接口,在三件更实的事:

扫描件里的表格要能重建出来,否则关键数据等于不存在;答案要能指回原文,指不回去就没人敢照着用;还要能指着文档里的图问问题——很多关键信息在图上,不在文字里。

结果与验收标准

做法是把文档统一解析成结构化数据再检索问答,另配人工审核流水线把关。

验收标准:每条回答都要能回指到原文位置检索质量要有可复现的评测口径,改动前后能对比——有一次优化反而让检索变差,我把它回退了。

先统一成结构化数据,再在它上面做检索与问答 资料层:技术文档 · 规章制度 · 设备履历 扫描件里的表格要能重建出来,否则关键数据等于不存在 统一结构化层:文档 → 条目 → 块 → 单元格 台账、正文与表格走同一套结构 这一层是四条应用共用的地基,不是某一个应用私有的 问答 按语义找答案 台账查询 按条件查条目 人工审核 产出有人把关 图文对照 指着图问问题
先统一成结构化数据,再在它上面支撑四个应用
产出有人把关,答案才敢用 模型产出条目 结构化之后 人工审核台 逐条看,不是抽查 退回修改 带着审核意见回到加工环节 通过,进入知识库 这一步之后才可能被检索到 没审核过的内容不进库 —— 这是"敢照着用"的前提 代价是慢,换来的是每条答案背后都有人负责看过
没审核过的内容不进库——这是「敢照着用」的前提
质量是被量化管理的,不是凭感觉 第一关 评测集跑分 固定题目、固定口径 第二关 切块质量检查 切得碎不碎、串不串 第三关 阈值校验 不过线就不放行 有一次优化反而让检索变差 跑分不支持,我就把它回退了 —— 没有"我觉得更好" 改动前后必须能对比 否则改了也不知道是变好还是变坏 三条门禁的意义:让"我改进了"这句话有依据,也让回退变得不丢人
三道门禁让「我改进了」有依据,也让回退变得不丢人