这个品类的数据长什么样
职业技能等级认定社会评价的进度记录与统计核对,围绕评价实施方案、考生报名表、考评员派遣表三类材料展开。评价实施方案给出批次、职业、等级、时间节点与统计口径;考生报名表提供考生姓名、证件号、申报职业与等级、报名日期及签字;考评员派遣表记录考评员姓名、证件号、派遣批次、到场日期与签字。三类材料按批次与日期滚动更新,字段以名称、数量、日期、签字为主,同一记录常跨表出现。材料进入知识库检索与召回时,各自作为独立片段被召回,用于核对名称、数量、日期与签字是否一致,不直接生成统计表。
配置怎么定
这一环由知识库检索服务(检索节点与搜索测试)执行,输出候选片段与相似度得分(经模式、合并、重排、过滤与上限裁剪)。「进度表与统计口径说明」由后续节点或人工接着完成。
| 对象 | 判断 | 核验动作 |
|---|---|---|
| 评价实施方案 | 批次、职业、等级、时间节点与统计口径的字段、日期与签字是否齐全 | 在知识库搜索测试中切换 searchMode 为语义、全文或混合,查看候选片段是否覆盖方案关键字段,记录候选条数与得分 |
| 考生报名表 | 考生姓名、证件号、申报职业与等级、报名日期与签字是否与实施方案对应 | 用同义问句检索报名表片段,对比候选与得分,核对名称、数量、日期是否与方案一致,缺签字或回执的片段单独标记 |
| 考评员派遣表 | 考评员姓名、证件号、派遣批次、到场日期与签字是否与实施方案对应 | 开启与关闭重排,对比前几条候选顺序,确认派遣批次与到场日期片段是否排在前面,记录候选条数与得分 |
| 检索参数 | similarity、limit、usingReRank 与检索模式是否与材料形态匹配 | 在搜索测试中调整 similarity 过滤低分候选,用 limit 控制返回条数,对比 usingReRank 开关前后排序,记录候选条数与得分 |
容易做错的三处
- 现象:同一考生在报名表与实施方案中的名称、数量或日期对不上。原因:两表版本未同步,或录入时未按同一口径核对。
- 现象:考评员派遣表缺签字或回执,统计时仍被计入。原因:派遣表未回传完整,核对时未把缺签字项单独标记。
- 现象:同一问题换个说法就召回不到关键片段。原因:检索模式与材料形态不匹配,或相似度过滤过严,候选未覆盖原文关键段落。
怎么确认配好了
本功能验收:用同义改写的问句各测一次,对比候选与得分,再开关重排看前几条排序;同时记录候选条数与得分,并核对 similarity、limit、usingReRank 与 searchMode 的取值。
业务测试:用一周记录核对合计,看口径与例外是否写清;引用条数按数组长度单独记录,引用上限核引用文本的 tokens,两者不做相等比较。
- 在知识库搜索测试中切换
searchMode为语义、全文或混合,对比同一问句的候选片段与相似度得分,确认材料形态与模式匹配。 - 开启与关闭重排,对比前几条候选顺序;调整
similarity与limit,记录候选条数与得分,检查引用文本是否保留原文关键片段。