这个品类的数据长什么样
中小学考试命题阅卷场景的材料分为命题双向细目表、试卷与评分细则三类,来源为教研组与命题组,更新节奏随考试批次与修订回执推进。细目表承载考点分布与题型分值,试卷承载题目正文与选项,评分细则承载得分点与签字栏。三类材料进入知识库检索与召回功能时,细目表与评分细则作为语义与全文召回的候选来源,试卷正文作为引用内容被裁剪后交给后续节点或人工,用于生成可对外的入口与授权范围。字段特征集中在日期、签字、数量与名称的一致性,同一记录在两份材料里的名称、数量、日期对不上时,检索候选与引用内容仍按原文片段返回,不承担统计与授权判定。
配置怎么定
这一环由知识库检索服务(检索节点与搜索测试)执行,输出候选片段与相似度得分(经模式、合并、重排、过滤与上限裁剪)。可对外的入口与授权范围由后续节点或人工接着完成。
| 对象 | 判断 | 核验动作 |
|---|---|---|
| 命题双向细目表 | 字段、日期与签字在三类材料间是否一致 | 在搜索测试中按考点名称检索,核对细目表与试卷、评分细则的名称、数量、日期与签字栏是否对得上,记录候选条数与得分 |
| 试卷 | 版本是否同步,题目正文与选项是否与细目表匹配 | 切换 searchMode 为语义、全文或混合,对比候选是否同时包含语义与全文结果,核对试卷版本与细目表版本是否同步 |
| 评分细则 | 得分点与签字回执是否齐全 | 开启 usingReRank 前后对比前几条排序,核对评分细则得分点与签字回执,单独记录引用数组条数 |
| 可对外的入口与授权范围 | 访问者身份与可见范围是否匹配,越权是否不可见 | 用受限身份访问一次,核对可见范围是否符合设定,并检查 similarity 过滤后引用文本的 tokens 与数组条数 |
容易做错的三处
- 现象:同一记录在细目表与评分细则里的名称、数量、日期对不上。原因:两份材料分别修订,版本未同步,检索候选仍按原文片段返回。
- 现象:试卷与评分细则的签字或回执缺失,对外入口却已开放。原因:授权范围未与材料齐备状态绑定,后续节点或人工未核验签字栏。
- 现象:同一问题换个说法就召回不到,候选很多但排在前面的都不相关。原因:检索模式与材料形态不匹配,重排未开启或相似度过滤与引用上限裁剪不当。
怎么确认配好了
本功能验收:用同义改写的问句各测一次,对比候选与得分,再开关重排看前几条排序;核对 searchMode、usingReRank、similarity 与 limit 的实际取值。
业务测试:用受限身份访问一次,看可见范围是否符合设定,越权不可见。
- 在知识库搜索测试里切换检索模式,对比候选结果是否同时包含语义与全文结果,记录候选条数与得分。
- 对比开启重排前后前几条的顺序,核对引用上限裁剪后引用文本的 tokens,数组条数单独记录。