这个品类的数据长什么样
本页面向中小学考试命题阅卷品类,材料包括命题双向细目表、试卷、评分细则,以及异常记录与复核结论。细目表按知识点、题型、分值、难度列出命题依据,试卷承载题干、选项、作答与卷面标识,评分细则给出得分点、扣分点与评分说明。材料来自命题组、审题组与阅卷组,按学期与考试批次更新,字段含名称、数量、日期、签字与回执。进入知识库检索服务后,细目表用于核对命题覆盖与分值分布,试卷用于定位原始作答与卷面记录,评分细则用于核对得分点与复核口径,异常记录用于串联来源材料与处置去向。
配置怎么定
这一环由知识库检索服务(检索节点与搜索测试)执行,输出候选片段与相似度得分(经模式、合并、重排、过滤与上限裁剪)。异常清单与复核结论由后续节点或人工接着完成。
| 对象 | 判断 | 核验动作 |
|---|---|---|
| 命题双向细目表 | 知识点、题型、分值、难度与试卷逐项对应,名称、数量、日期与签字可核 | 在搜索测试里用同一异常记录换说法各检一次,对比候选条数与得分,核细目表字段与签字 |
| 试卷 | 题干、作答与卷面标识能追到原始记录,题号、分值、日期与细目表一致 | 切换 searchMode 为语义、全文或混合,看候选是否同时含语义与全文结果,再核卷面字段 |
| 评分细则 | 得分点、扣分点与评分说明同试卷作答对应,版本与日期同步,签字与回执齐全 | 开启重排前后对比前几条顺序,核 usingReRank 效果,并核细则版本与签字 |
| 异常记录与复核结论 | 异常有原始记录支撑,复核人签字,去向交负责人处置 | 按 similarity 与 limit 观察候选与得分,核引用文本 tokens,数组条数单独记录 |
容易做错的三处
- 现象:同一异常记录在细目表与试卷里的名称、数量、日期对不上。原因:两份材料版本未同步,录入时未按同一批次核对。
- 现象:评分细则缺签字或回执,复核结论无原始记录支撑。原因:流转环节漏签,回执未随材料归档。
- 现象:同一问题换个说法就召回不到,候选很多但排在前面的都不相关。原因:检索模式与材料形态不匹配,重排未开启或相似度过滤过严。
怎么确认配好了
本功能验收:用同义改写的问句各测一次,对比候选与得分,再开关重排看前几条排序。
业务测试:造一条异常记录,看能否追到源头材料。
- 在知识库搜索测试里切换
searchMode,对比语义、全文与混合三者的候选条数与得分,记录数组条数。 - 开启与关闭
usingReRank,对比前几条顺序,并按similarity与limit核引用文本 tokens。