这个品类的数据长什么样
本页面向学术期刊经营合作管理场景,材料来自经营合作协议、广告审查表、发行合作材料三类。经营合作协议记录合作主体、期限与分成口径;广告审查表承载广告内容、审查结论与签字栏;发行合作材料登记渠道、数量、日期与回执。三类材料按批次进入知识库,更新节奏随协议续签、审查结论变更与发行回执回收而变。字段特征集中在名称、数量、日期、版本号与签字栏:同一记录在不同材料中的名称写法、数量口径、日期时点常不一致,版本未同步时旧稿仍留在库内,缺签字或回执的扫描件也会一并入库。进入该功能时,经营合作协议、广告审查表、发行合作材料各自作为候选片段来源参与召回,由检索节点返回片段与得分,受理记录与补齐的问项由后续节点或人工据此完成。
配置怎么定
这一环由知识库检索服务(检索节点与搜索测试)执行,输出候选片段与相似度得分(经模式、合并、重排、过滤与上限裁剪)。受理记录与补齐的问项由后续节点或人工接着完成。检索服务本身只负责给出候选与得分,不产出统计表、业务文书或授权结果。
| 对象 | 判断 | 核验动作 |
|---|---|---|
| 经营合作协议 | 名称、数量、日期、签字栏是否与广告审查表、发行合作材料对得上;版本号是否同步 | 在知识库搜索测试里用同一记录的名称与日期检索,核对返回候选条数与得分,逐条比对签字栏与版本号 |
| 广告审查表 | 审查结论日期、广告名称、数量口径是否与经营合作协议一致;回执是否齐全 | 切换 searchMode 为语义、全文、混合各检索一次,看候选是否覆盖审查结论与签字栏段落,记录候选条数与得分 |
| 发行合作材料 | 发行渠道、数量、日期、回执签字是否与经营合作协议一致;旧版本是否仍在库 | 用发行渠道与日期组合检索,开启与关闭 usingReRank 对比前几条排序,核对相似度过滤后保留的原文关键片段 |
| 知识库检索服务 | 候选片段与相似度得分是否经模式、合并、重排、过滤与上限裁剪后返回 | 在搜索测试中调 similarity 与 limit,看候选条数与得分变化,确认引用文本的 tokens 与数组条数分别记录 |
容易做错的三处
- 现象:同一记录在经营合作协议与发行合作材料里的名称、数量、日期对不上。原因:两处材料各自录入,未做字段级比对,检索时各自召回。
- 现象:广告审查表已更新,旧版本仍被召回。原因:版本未同步,旧稿未下架,候选片段同时命中新旧两版。
- 现象:候选很多但排在前面的都不相关,回答缺少关键段落。原因:未开重排或相似度过滤过松,引用上限裁剪前未做二次排序。
怎么确认配好了
本功能验收:用同义改写的问句各测一次,对比候选与得分,再开关重排看前几条排序;同时切换 searchMode 与 usingReRank,记录候选条数与得分。
业务测试:提一个缺关键信息的问句,看是否先追问再作答;若直接作答,检查是否命中缺签字或回执的片段。
- 在知识库搜索测试里用同一记录的名称、数量、日期各检索一次,核对返回候选条数与得分,并逐条比对两份材料字段。
- 调
similarity与limit观察候选裁剪,确认引用文本的 tokens 与数组条数分别记录,再开启usingReRank对比前几条排序。