校外培训合规备案与处罚应对的异常追溯与人工复核:检索召回

围绕校外培训合规备案与处罚应对的异常追溯与人工复核,说明知识库检索与召回的配置前提与核对动作,结合办学许可证、课程备案材料确认结果传递与生效状态,附上线前的验证步骤。

这个品类的数据长什么样

校外培训合规备案与处罚应对,材料分三类:办学许可证、课程备案材料、收费公示。办学许可证含机构名称、地址、有效期、发证日期与公章签字;课程备案材料含课程名称、课时数、教材版本、备案日期与经办签字;收费公示含收费项目、金额单位、公示日期与回执。三类材料各自进入知识库检索服务,作为候选片段的原始来源,供后续节点与人工比对。更新节奏上,许可证换发、课程调整、收费公示变更均会形成新版本,旧版本若未同步进入检索范围,同一记录在两份材料里的名称、数量、日期就可能对不上。字段特征上,名称、数量、日期、签字、回执是异常追溯的关键锚点,检索返回的候选片段与相似度得分,是人工复核与负责人处置的起点。

配置怎么定

这一环由知识库检索服务(检索节点与搜索测试)执行,输出候选片段与相似度得分(经模式、合并、重排、过滤与上限裁剪)。「异常清单与复核结论」由后续节点或人工接着完成。

对象判断核验动作
办学许可证机构名称、地址、有效期、发证日期与签字是否与课程备案材料、收费公示一致在搜索测试里用同义问句各测一次,切换 searchMode 对比候选条数与得分,检查名称、日期字段是否对得上
课程备案材料课程名称、课时数、教材版本、备案日期与经办签字是否与许可证、收费公示一致开启与关闭 usingReRank 对比前几条排序,核对课时数与备案日期是否跨材料一致
收费公示收费项目、金额单位、公示日期与回执是否与许可证、课程备案材料一致调整 similarity 观察候选过滤效果,单独记录引用条数与引用文本 tokens,核对回执与签字是否缺失
异常记录异常是否有原始记录支撑、复核人是否签字从候选片段追到源头材料,确认名称、数量、日期与签字回执可对应,再交负责人处置

容易做错的三处

  • 现象:同一课程在两份材料里的名称、课时数或备案日期对不上。原因:旧版本未同步进入检索范围,候选片段来自不同版本材料。
  • 现象:收费公示缺回执或经办签字。原因:公示材料上传不完整,检索候选里找不到签字与回执片段。
  • 现象:候选很多但排在前面的都不相关,回答缺少关键段落。原因:检索模式与材料形态不匹配,重排未开启或相似度过滤过宽。

怎么确认配好了

本功能验收:用同义改写的问句各测一次,对比候选条数与得分,再开关重排看前几条排序;切换 searchMode、调整 similarity、开关 usingReRank,单独记录引用条数与引用文本 tokens。

业务测试:造一条异常记录,看能否追到源头材料,确认名称、数量、日期与签字回执可对应。

  • 在搜索测试里切换 searchMode,对比语义、全文与混合三种模式返回的候选条数与得分,确认与材料形态匹配。
  • 开启与关闭 usingReRank,对比前几条候选顺序;调整 similarity 观察过滤效果,单独记录引用条数与引用文本 tokens。