这个品类的数据长什么样
本页面向中小学考试命题阅卷场景中的进度记录与统计核对材料,包括命题双向细目表、试卷、评分细则三类来源。双向细目表按知识板块、题型、分值、难度分布记录命题依据,试卷承载题目正文与卷面结构,评分细则给出得分点、扣分点与评分说明。材料随命题、审题、阅卷三阶段更新:命题阶段形成细目表与试卷初稿,审题阶段同步版本并补签字,阅卷阶段回填评分细则与进度记录。三类材料进入知识库检索与召回功能时,各自以片段形式参与检索:细目表片段用于核对考点与分值口径,试卷片段用于核对题号与分值,评分细则片段用于核对得分点与回执。字段特征集中在记录名称、数量、日期、版本号与签字栏,检索时需保留这些字段所在段落,便于后续节点或人工据候选片段生成进度表与统计口径说明。
配置怎么定
知识库检索服务(检索节点与搜索测试)只输出候选片段与相似度得分(经模式、合并、重排、过滤与上限裁剪),进度表与统计口径说明要由后续节点或人工接着做。检索模式在语义、全文与混合之间切换,多路候选经合并后由重排二次排序,最后按相似度过滤与引用上限裁剪。
| 对象 | 判断 | 核验动作 |
|---|---|---|
| 命题双向细目表 | 字段含知识板块、题型、分值、难度与日期,签字栏应与审题记录一致 | 在搜索测试中检索细目表片段,核对字段与签字是否完整,记录候选条数与得分 |
| 试卷 | 题号、分值、日期与版本号应与细目表逐项对应,缺签字或回执即为不一致 | 切换 searchMode 对比语义与全文召回,看试卷片段是否覆盖题号与分值字段 |
| 评分细则 | 得分点、扣分点、回执与日期应与试卷版本同步,名称与数量不得对不上 | 开启重排前后对比前几条排序,核对细则片段与试卷片段的名称、数量、日期 |
| 进度记录与统计口径说明 | 记录数与统计数应一致,口径写到表头,例外逐条注明 | 用一周记录核对合计,检查口径与例外是否写清,并记录 similarity 与 limit 下的候选条数 |
容易做错的三处
- 现象:同一记录在细目表与试卷里的名称、数量、日期对不上。原因:两处分别录入且未做字段级核对,检索候选只作参考,需先核命中与关联。
- 现象:评分细则版本未同步,回执或签字栏空缺。原因:审题后修改未回填,检索返回的候选片段仍指向旧版本,需人工比对版本号与日期。
- 现象:候选很多但排在前面的都不相关,回答缺少关键段落。原因:检索模式与材料形态不匹配,或重排未开启,需切换模式并对比排序。
怎么确认配好了
本功能验收:用同义改写的问句各测一次,对比候选条数与 similarity 得分,再开关重排看前几条排序,并记录 searchMode 下的候选差异。
业务测试:用一周记录核对合计,看口径与例外是否写清,核对记录数与统计数是否一致。
- 在搜索测试中分别用语义、全文与混合模式检索同一问题,记录候选条数与得分,核对
usingReRank开关前后排序变化。 - 抽取细目表、试卷、评分细则各一段,逐项核对名称、数量、日期与签字,将不一致处写入统计口径说明的例外栏。