中小学考试命题阅卷的授权访问与对外服务:引用来源与溯源

围绕中小学考试命题阅卷的授权访问与对外服务,说明引用来源与溯源的配置前提与核对动作,结合命题双向细目表、试卷确认结果传递与生效状态,附上线前的验证步骤。

这个品类的数据长什么样

中小学考试命题阅卷材料包括命题双向细目表、试卷、评分细则。细目表记录知识点、题型、分值、难度与命题人签字;试卷含题号、题干、选项、答案与考试日期;评分细则含评分点、给分档、阅卷人签字与回执。三类材料进入授权访问与对外服务时,细目表作为命题依据决定试卷结构,试卷作为作答载体决定评分细则条目,评分细则作为判分依据回指试卷题号。材料按考试批次更新,同一批次内版本需同步。字段特征为名称、数量、日期、签字四类,常见对不上之处集中在同一记录在两份材料里的名称、数量、日期,以及版本未同步、缺签字或回执。

配置怎么定

这一环由知识库检索节点的引用输出执行,输出引用内容数组,每条含原文片段与来源标识,长度可以为 0。可对外的入口与授权范围由后续 AI 节点、代码节点或人工接着完成。

对象判断核验动作
命题双向细目表字段含知识点、题型、分值、难度、命题人签字与日期,与试卷题号、分值、考试日期对得上在节点里核对已选集合与它们的向量模型,再打开引用角标对照细目表原文段落
试卷字段含题号、题干、答案、考试日期与命题人签字,与评分细则条目、给分档、阅卷人签字对得上用一条没有匹配材料的问句试跑,看引用数组为空而链路继续,再逐项核对搜索参数
评分细则字段含评分点、给分档、阅卷人签字与回执,与试卷题号、分值、考试日期对得上打开搜索参数面板逐项核对,并记录引用文本的 tokens 与数组条数

容易做错的三处

  • 现象:同一道题在细目表与试卷里的分值对不上。原因:两份材料分别更新,版本未同步,且缺命题人签字或回执。
  • 现象:评分细则条目多于试卷题号。原因:同一记录在两份材料里的数量对不上,更新节奏不同步。
  • 现象:回答里没有引用角标。原因:本轮未命中材料,或命中的材料与问句不匹配,需先核命中条目再看裁剪。

怎么确认配好了

本功能验收:问一个有原文依据的问题,核引用数组与角标能否回指原文;再问一个无匹配材料的问题,确认数组为空而链路走通。核对时记录引用条数与引用文本的 tokens,quoteMaxToken 只作内容预算,数组条数单独记录,两者不做相等比较。

业务测试:用受限身份访问一次,看可见范围是否符合设定,越权不可见;同时核对 responseData(开启详情返回后的非流式模块结果) 与 quoteList 字段是否与设定一致。

  • 打开引用角标,对照来源文档,逐条核对引用片段与原文段落是否一致。
  • 打开搜索参数面板逐项核对,确认与知识库检索一节里设置的取值一致。

References