这个品类的数据长什么样
自费出国留学申请服务的材料分三类:留学服务合同、学校申请表、个人陈述。合同记录服务范围、费用与双方签字日期;申请表记录院校、专业、入学季与递交回执;个人陈述记录版本、字数与定稿日期。三类材料更新节奏不同:合同随补充协议换版,申请表随院校要求调整,个人陈述按轮次迭代。材料进入知识库检索与召回时,合同与申请表承担依据来源角色,个人陈述承担佐证角色;同一记录的名称、数量、日期需在两类材料间对齐,缺签字或回执的版本不得作为现行依据。
配置怎么定
这一环由知识库检索服务(检索节点与搜索测试)执行,输出候选片段与相似度得分(经模式、合并、重排、过滤与上限裁剪)。可回指原文的依据条目由后续节点或人工接着完成。
| 对象 | 判断 | 核验动作 |
|---|---|---|
| 留学服务合同 | 字段含服务范围、费用、签字日期;版本须为现行,签字与回执齐全 | 在搜索测试中以合同名称与日期为问句检索,核对候选片段是否命中现行版本,记录候选条数与得分 |
| 学校申请表 | 字段含院校、专业、入学季、递交日期;与合同中的院校名称、数量须一致 | 切换 searchMode 为语义、全文、混合各测一次,看候选是否同时覆盖申请表与合同字段 |
| 个人陈述 | 字段含版本号、字数、定稿日期;与申请表专业方向须对齐 | 开启 usingReRank 前后对比前几条排序,确认定稿版本排在草稿之前 |
| 依据条目 | 条目须回指原文,名称、数量、日期在跨材料间对得上 | 按 similarity 过滤后记录候选条数,核对引用文本 tokens 与数组条数分别记录 |
容易做错的三处
- 现象:同一院校名称在合同与申请表里写法不同,检索只命中一份。原因:名称未统一,候选被相似度过滤裁掉。
- 现象:个人陈述定稿日期与申请表递交日期对不上,回答引用旧版。原因:版本未同步,现行版本未进入候选。
- 现象:合同缺签字或回执,仍被当作依据召回。原因:材料字段不完整,检索未按签字状态过滤。
怎么确认配好了
本功能验收:用同义改写的问句各测一次,对比候选与得分,再开关重排看前几条排序。
业务测试:问一个跨材料的依据问题,看回答是否给出可回指的出处。
- 在搜索测试中固定问句,切换
searchMode三选一,记录候选条数与得分。 - 开启与关闭
usingReRank,对比前几条顺序,并按similarity过滤后核对引用文本 tokens。