考务组织与违纪处理的资料版本与变更维护:文档解析与分块

围绕考务组织与违纪处理的资料版本与变更维护,说明文档解析与分块的配置前提与核对动作,结合考务手册、考场记录单确认结果传递与生效状态,附上线前的验证步骤。

这个品类的数据长什么样

考务组织与违纪处理材料包括考务手册、考场记录单、违纪事实记录,来源为考务部门与考点回执,更新节奏随考试批次与制度修订变化。考务手册规定流程与字段口径,考场记录单承载现场时间、人数与签字,违纪事实记录锁定事实、日期与回执。三类材料进入文档解析与分块时,考务手册作为规则底本参与分块与索引,考场记录单与违纪事实记录作为证据行,按字段切分后绑定唯一数据标识,供后续检索与版本台账引用。字段特征集中在名称、数量、日期、签字与回执,同名记录在不同材料间需保持口径一致。

配置怎么定

解析与训练任务(服务端任务)只输出数据行与索引状态(已解析、索引中、已完成),版本台账与变更记录要由检索与后续处理接着做。解析分块在解析完成后立即落库为可见数据行并绑定唯一数据标识,索引按 parsed、indexing、indexed 三态流转,待索引数据不参与召回。换模型只对已完成索引的数据重建。

对象判断核验动作
考务手册字段口径与日期版本是否唯一,签字与回执要求是否随批次同步核对 chunkSize 与 chunkSplitter 切分后各章节的 parsed、indexing、indexed 状态
考场记录单同一记录的名称、数量、日期在两份材料里是否对得上,签字是否齐全分别核对文件记录与数据行,确认考场记录单与考务手册引用同一数据标识
违纪事实记录违纪事实、日期与回执是否与记录单一致,旧版是否可追查看 trainingType 对应训练模式下的数据行状态,确认重建只覆盖 indexed 数据
版本台账现行版本是否唯一、旧版是否可追、引用是否同步改一处内容后核对版本号与引用是否同步更新,并检查数组条数与引用文本 tokens

容易做错的三处

  • 现象:刚上传的材料搜不到。原因:数据行处于 parsed 或 indexing,待索引数据在检索层天然隔离不被召回,需等索引完成。
  • 现象:同一记录在考务手册与考场记录单里的名称、数量、日期对不上。原因:两份材料分块后未绑定同一数据标识,版本未同步。
  • 现象:训练失败后留下空数据行,或缺签字与回执。原因:初次训练覆盖待索引数据,失败数据未编辑或删除,材料本身字段不全。

怎么确认配好了

本功能验收:上传一份材料,看数据行状态流转与重建任务的覆盖范围,确认 parsed 到 indexing 再到 indexed 的流转与界面显示一致,重建只覆盖 indexed 数据。

业务测试:改一处内容,看版本号与引用是否同步更新

  • 打开数据行核对状态,确认处于 parsed、indexing、indexed 三态之一且与界面显示一致
  • 分别核对文件记录与数据行,确认文件记录与数据行各自的身份分得开,并记录引用数组条数与引用文本 tokens