研究生招生复试录取的多语资料与术语处理:文档解析与分块

围绕研究生招生复试录取的多语资料与术语处理,说明文档解析与分块的配置前提与核对动作,结合复试方案、考生成绩表确认结果传递与生效状态,附上线前的验证步骤。

这个品类的数据长什么样

研究生招生复试录取场景中,材料来源包括复试方案、考生成绩表、调剂名单以及多语种对照稿,更新节奏集中在复试前后与调剂窗口期,字段涉及考生编号、姓名、初试与复试成绩、调剂志愿、日期与签字栏。多语资料与术语处理时,复试方案承担规则与流程术语的原文出处,考生成绩表与调剂名单承担姓名、数量、日期等记录型字段的对照校验,多语对照稿承担译名回指原文的核验入口。材料进入文档解析与分块功能后,各自以文件记录与数据行两种身份存在,解析分块用于形成可检索的数据行,术语表与对照稿的成品由检索与后续处理完成。

配置怎么定

这一环由解析与训练任务(服务端任务)执行,输出数据行与索引状态(已解析、索引中、已完成)。「统一术语表与对照稿」由检索与后续处理接着完成。解析分块在解析完成后立即落库为可见数据行并绑定唯一数据标识,索引按三态流转,待索引数据不参与召回。

对象判断核验动作
复试方案字段、日期与签字是否与调剂名单对得上核对方案中的日期、签字栏与调剂名单对应记录,并查看数据行状态是否为 parsed、indexing 或 indexed
考生成绩表同一记录的名称、数量、日期在两份材料里是否一致分别核对文件记录与数据行,抽三条术语查全篇写法是否一致,并记录 chunkSize 与 chunkSplitter 的取值
调剂名单版本是否同步、是否缺签字或回执核对名单版本与回执,确认重建任务只覆盖已完成索引的数据,并查看 trainingType 对应的处理模式
多语对照稿译名能否回指原文、同一术语全篇是否一致抽三条术语查全篇写法,核对对照稿与原文的术语映射,并确认数据行状态与界面显示一致

容易做错的三处

  • 现象:同一记录在复试方案与调剂名单里的名称、数量、日期对不上。原因:两份材料版本未同步,或字段录入口径不一致。
  • 现象:刚上传的材料搜不到。原因:数据行仍处于待索引状态,检索层天然隔离,未进入召回范围。
  • 现象:训练失败后留下空数据行,或缺签字与回执。原因:训练中断残留孤儿数据,且材料交接环节未完成签字确认。

怎么确认配好了

本功能验收:上传一份材料,看数据行状态流转与重建任务的覆盖范围,确认状态为 parsed、indexing、indexed,并核对 chunkSize、chunkSplitter、trainingType 对应的处理记录。

业务测试:抽三条术语查全篇写法是否一致,并核对译名能否回指原文,确认同一术语全篇一致。

  • 打开数据行核对状态,确认处于三态之一且与界面显示一致。
  • 分别核对文件记录与数据行,确认文件与数据行的标识分得开,并看重建任务覆盖的数据行是否只包含已完成索引的数据。