这个品类的数据长什么样
幼儿园游戏活动组织的部署运维与应用交接,材料来自观察记录、区域计划、材料投放清单、活动目标与反思转下周计划。这些材料进入知识库检索与召回功能时,各自角色不同:观察记录与区域计划是语义召回的主要来源,材料投放数量与活动目标作为结构化字段参与过滤与重排,反思转下周计划则用于问题优化与扩展。更新节奏按周或按活动周期推进,字段特征包含活动名称、区域、材料数量、目标描述、观察要点与反思结论。检索时,这些片段先被召回为候选,再经合并、重排、过滤与上限裁剪,最终形成可交给后续节点或人工的引用内容,用于生成可交接的部署状态与操作记录。
配置怎么定
这一环由知识库检索服务(检索节点与搜索测试)执行,输出候选片段与相似度得分(经模式、合并、重排、过滤与上限裁剪)。可交接的部署状态与操作记录由后续节点或人工接着完成。
| 对象 | 判断 | 核验动作 |
|---|---|---|
| 观察记录与区域计划 | 观察记录中的行为描述与区域计划中的活动目标是否对应,材料数量是否满足计划所需 | 在知识库搜索测试里用同一问题的不同说法各检索一次,查看候选片段与相似度得分,确认观察记录与区域计划是否同时被召回 |
| 材料投放清单 | 材料投放数量与活动目标达成所需是否一致,是否存在材料不足导致目标无法完成 | 切换searchMode为混合检索,对比语义与全文候选是否都包含材料数量相关片段,并检查similarity得分是否靠前 |
| 反思转下周计划 | 反思结论是否已更新到下周计划,计划未更新时检索是否仍返回旧版本片段 | 开启与关闭usingReRank各检索一次,对比前几条候选顺序,确认反思与下周计划片段是否被正确重排 |
| 引用上限裁剪 | 裁剪后是否仍保留原文关键片段,引用条数与引用文本tokens是否分别记录 | 查看返回引用的数组条数,单独记录limit值,并核对引用文本的tokens是否超出预算,不将两者做相等比较 |
容易做错的三处
- 现象:同一问题换个说法就召回不到观察记录。原因:问题优化未覆盖指代与扩展,或检索模式与材料形态不匹配。
- 现象:候选很多但排在前面的都不相关。原因:混合检索后未开启重排,或相似度过滤与引用上限裁剪设置不当。
- 现象:回答缺少关键段落,材料不足或目标与观察不符。原因:材料投放数量未同步更新,反思转下周计划未更新,导致召回片段与当前计划不一致。
怎么确认配好了
本功能验收:用同义改写的问句各测一次,对比候选与得分,再开关重排看前几条排序。
业务测试:按交接单逐项核对一次,看缺哪一项记录。
- 在知识库搜索测试里,对同一问题用两种说法各检索一次,记录候选条数与相似度得分,确认观察记录与区域计划是否同时命中。
- 切换
searchMode为语义、全文与混合,分别开启和关闭usingReRank,对比前几条候选顺序,并单独记录limit对应的数组条数。