这个品类的数据长什么样
职业技能等级认定社会评价的对外授权与知识库检索召回,材料来自评价实施方案、考生报名表、考评员派遣表。实施方案进入知识库作为授权范围与评价流程的底稿,报名表与派遣表作为身份与派遣关系的核验底稿。更新节奏跟随认定批次与授权变更,字段特征集中在姓名、职业(工种)、等级、日期与签字栏。对外入口开放前,三类材料须按同一记录对齐名称、数量与日期,签字或回执齐全。检索召回时,材料被切分为候选片段,授权范围与可见身份由后续节点或人工据此生成,检索本身不产出授权结果。
配置怎么定
知识库检索服务(检索节点与搜索测试)只输出候选片段与相似度得分(经模式、合并、重排、过滤与上限裁剪),可对外的入口与授权范围要由后续节点或人工接着做。
| 对象 | 判断 | 核验动作 |
|---|---|---|
| 评价实施方案 | 名称、职业(工种)、等级、日期与签字栏须与报名表一致 | 在搜索测试中切换 searchMode,核对候选片段是否覆盖方案中的授权范围与评价流程字段 |
| 考生报名表 | 同一记录在方案与报名表中的姓名、数量、日期对不上即视为不一致 | 用受限身份发起同义问句,记录候选条数与 similarity 得分,确认可见范围与报名身份匹配 |
| 考评员派遣表 | 派遣表中的考评员姓名、日期与签字或回执须与方案版本同步 | 开启 usingReRank 前后对比前几条排序,核派遣记录是否落在授权可见范围内 |
| 引用上限裁剪 | 裁剪后仍保留原文关键片段,数组条数单独记录 | 核引用文本的 tokens 与 limit 设置,不将数组长度与引用内容预算做相等比较 |
容易做错的三处
- 现象:同一考生在报名表与实施方案中的姓名或日期对不上。原因:两份材料分别录入,未按同一记录做名称、数量与日期对齐。
- 现象:考评员派遣表缺签字或回执,授权范围仍被开放。原因:版本未同步,派遣表未随方案更新,签字栏未核。
- 现象:同一问题换个说法就召回不到,候选很多但排在前面的都不相关。原因:检索模式与材料形态不匹配,重排未开或相似度过滤过严。
怎么确认配好了
本功能验收:用同义改写的问句各测一次,对比候选与 similarity 得分,再开关 usingReRank 看前几条排序,并记录候选条数与 limit。
业务测试:用受限身份访问一次,看可见范围是否符合设定,越权内容不可见。
- 在知识库搜索测试中切换
searchMode,对比语义、全文与混合三种模式返回的候选片段与得分。 - 核引用文本的 tokens 与数组条数,确认相似度过滤与引用上限裁剪后仍保留原文关键片段。