中小学考试命题阅卷的异常追溯与人工复核:知识库检索与召回

围绕中小学考试命题阅卷的异常追溯与人工复核,说明知识库检索与召回的配置前提与核对动作,结合命题双向细目表、试卷确认结果传递与生效状态,附上线前的验证步骤。

这个品类的数据长什么样

本页面向中小学考试命题阅卷品类,材料包括命题双向细目表、试卷、评分细则,以及异常记录与复核结论。细目表按知识点、题型、分值、难度列出命题依据,试卷承载题干、选项、作答与卷面标识,评分细则给出得分点、扣分点与评分说明。材料来自命题组、审题组与阅卷组,按学期与考试批次更新,字段含名称、数量、日期、签字与回执。进入知识库检索服务后,细目表用于核对命题覆盖与分值分布,试卷用于定位原始作答与卷面记录,评分细则用于核对得分点与复核口径,异常记录用于串联来源材料与处置去向。

配置怎么定

这一环由知识库检索服务(检索节点与搜索测试)执行,输出候选片段与相似度得分(经模式、合并、重排、过滤与上限裁剪)。异常清单与复核结论由后续节点或人工接着完成。

对象判断核验动作
命题双向细目表知识点、题型、分值、难度与试卷逐项对应,名称、数量、日期与签字可核在搜索测试里用同一异常记录换说法各检一次,对比候选条数与得分,核细目表字段与签字
试卷题干、作答与卷面标识能追到原始记录,题号、分值、日期与细目表一致切换 searchMode 为语义、全文或混合,看候选是否同时含语义与全文结果,再核卷面字段
评分细则得分点、扣分点与评分说明同试卷作答对应,版本与日期同步,签字与回执齐全开启重排前后对比前几条顺序,核 usingReRank 效果,并核细则版本与签字
异常记录与复核结论异常有原始记录支撑,复核人签字,去向交负责人处置按 similarity 与 limit 观察候选与得分,核引用文本 tokens,数组条数单独记录

容易做错的三处

  • 现象:同一异常记录在细目表与试卷里的名称、数量、日期对不上。原因:两份材料版本未同步,录入时未按同一批次核对。
  • 现象:评分细则缺签字或回执,复核结论无原始记录支撑。原因:流转环节漏签,回执未随材料归档。
  • 现象:同一问题换个说法就召回不到,候选很多但排在前面的都不相关。原因:检索模式与材料形态不匹配,重排未开启或相似度过滤过严。

怎么确认配好了

本功能验收:用同义改写的问句各测一次,对比候选与得分,再开关重排看前几条排序。

业务测试:造一条异常记录,看能否追到源头材料。

  • 在知识库搜索测试里切换 searchMode,对比语义、全文与混合三者的候选条数与得分,记录数组条数。
  • 开启与关闭 usingReRank,对比前几条顺序,并按 similarity 与 limit 核引用文本 tokens。