企业自主技能人才评价的进度记录与统计核对:知识库检索与召回

围绕企业自主技能人才评价的进度记录与统计核对,说明知识库检索与召回的配置前提与核对动作,结合企业评价备案表、评价规范确认结果传递与生效状态,附上线前的验证步骤。

这个品类的数据长什么样

本页面向企业自主技能人才评价场景,材料包括评价备案表、评价规范、考生花名册、进度表与统计口径说明。备案表与规范来自评价机构内部归档,花名册由申报单位提交,进度表随周报或月报更新。字段特征集中在名称、数量、日期与签字:备案表记评价职业与等级,规范记考核方式与评分口径,花名册记考生身份与批次,进度表记各环节记录数。材料进入知识库检索服务时,各自作为候选片段来源,由检索节点与搜索测试按模式召回,供后续节点或人工据此生成进度表与统计口径说明,检索本身不产出统计表或授权结果。

配置怎么定

这一环由知识库检索服务(检索节点与搜索测试)执行,输出候选片段与相似度得分(经模式、合并、重排、过滤与上限裁剪)。「进度表与统计口径说明」由后续节点或人工接着完成。

对象判断核验动作
评价备案表名称、日期与签字须与评价规范一致,同一记录在两份材料里的名称与日期对得上在搜索测试里用备案表职业名称与规范标题各检索一次,核对候选片段中的名称、日期与签字字段,记录候选条数与similarity得分
考生花名册数量与批次须与进度表一致,缺签字或回执的条目单独标出用花名册批次号与进度表批次号分别检索,对比候选片段中的数量与日期,确认签字或回执字段是否出现,记录候选条数与得分
评价规范版本须与备案表同步,考核方式与评分口径写到表头切换searchMode为语义、全文与混合各测一次,对比规范版本号与备案表版本号,看候选是否同时包含语义与全文结果
进度表与统计口径说明记录数与统计数对得上,口径写到表头,例外写清用一周记录核对合计,在搜索测试中开启usingReRank前后对比前几条排序,看similarity过滤与limit裁剪后引用文本的tokens与数组条数

容易做错的三处

  • 现象:同一考生在两份材料里的名称与数量对不上。原因:备案表与花名册版本未同步,检索候选只命中其中一份,核对时须先看命中与关联。
  • 现象:进度表日期与评价规范日期对不上。原因:规范修订后未回填备案表,候选片段来自旧版本,须核对版本号与签字回执。
  • 现象:候选很多但排在前面的都不相关。原因:同一问题换个说法就召回不到,或未开启重排,须在搜索测试里对比开启前后前几条顺序。

怎么确认配好了

本功能验收:用同义改写的问句各测一次,对比候选与similarity得分,再开关重排看前几条排序;切换searchMode为语义、全文与混合,记录候选条数与得分,并确认limit裁剪后引用文本的tokens与数组条数分别记录。

业务测试:用一周记录核对合计,看口径与例外是否写清,确认记录数与统计数对得上、口径写到表头。

  • 在知识库搜索测试里用备案表、花名册与规范标题各检索一次,记录候选条数与similarity得分。
  • 对比开启usingReRank前后前几条顺序,核对引用文本的tokens与数组条数,确认limit裁剪未丢关键片段。