这个品类的数据长什么样
本页面向中小学考试命题阅卷场景,材料包括命题双向细目表、试卷、评分细则三类。双向细目表承载考点分布、题型比例、认知层级与命题人签字日期;试卷承载题目正文、分值、考试时间与命题、审题签字;评分细则承载答案要点、分步赋分、评分说明与审核回执。材料按学期或考次更新,同一考次可能存在修订版与现行版并存。三类材料进入知识库检索节点时,各自作为独立来源参与向量搜索,引用输出按命中的材料片段返回,供后续比对字段、写台账、生成报告使用。跨材料依据问题常涉及同一考点名称、题号数量、考试日期在不同材料中的对应关系。
配置怎么定
这一环由知识库检索节点的引用输出执行,输出引用内容数组,每条含原文片段与来源标识,长度可以为 0。「可回指原文的依据条目」由后续 AI 节点、代码节点或人工接着完成。
| 对象 | 判断 | 核验动作 |
|---|---|---|
| 命题双向细目表 | 字段含考点名称、题型、分值、认知层级、命题人与日期;版本须为现行版;签字齐全 | 打开细目表逐项核对字段与签字,确认版本日期与现行考次一致 |
| 试卷 | 字段含题号、题干、分值、考试时间、命题与审题签字;数量与细目表对应 | 对照细目表核题号与分值数量,检查试卷签字与日期是否齐备 |
| 评分细则 | 字段含答案要点、分步赋分、评分说明、审核签字或回执;与试卷题号对应 | 逐题核对细则与试卷题号、分值,确认审核签字或回执存在 |
| 引用内容输出 | 返回条数与命中的材料一致,为空也算正常;每条可回指原文段落 | 问一个跨材料依据问题,核引用条数与角标回指;再问无匹配材料问题,看数组为空而链路走通 |
容易做错的三处
- 现象:同一考点在细目表与试卷里的名称或数量对不上。原因:两份材料修订不同步,或录入时未按现行版统一字段。
- 现象:评分细则的题号与试卷题号、分值对不上。原因:试卷改版后细则未同步更新,版本未同步导致条目错位。
- 现象:细目表或评分细则缺签字、缺回执。原因:审核流程未走完就归档,材料进入检索时缺少签批字段。
怎么确认配好了
本功能验收:问一个有原文依据的问题,核引用数组与角标能否回指原文;再问一个无匹配材料的问题,确认数组为空而链路走通。涉及引用上限时,核引用文本的 tokens,数组条数单独记录,引用条数是数组长度,quoteMaxToken 是引用内容预算,两者不做相等比较;可查看 responseData(开启详情返回后的非流式模块结果) 与 quoteList 中的引用片段与来源标识。
业务测试:问一个跨材料的依据问题,看回答是否给出可回指的出处,并核对出处属于相关材料、版本为现行版、条目能对上原文。
- 打开搜索参数面板逐项核对取值,确认关联知识库为同一向量模型,并用一条没有匹配材料的问句试跑,看输出为空而链路继续。
- 在对话里打开引用角标,对照来源文档核每条引用能否回指原文段落,记录数组条数与引用文本 tokens。