模型指南官方文档4 分钟阅读模型组合页

OpenAI 1000K 上下文 这一档模型配 OceanBase 的配置口径

这一档模型具备百万级别的上下文长度,即 `maxContext` 高达 1000000 token,允许在单次交互中处理海量的输入信息。引用上限 `quoteMaxToken` 同样高达 1000000 token,表明模型能够将非常大量的引用内容纳入其理解范畴。模型支持 `图片输入 true`,意

这一档模型的参数意味着什么

这一档模型具备百万级别的上下文长度,即 maxContext 高达 1000000 token,允许在单次交互中处理海量的输入信息。引用上限 quoteMaxToken 同样高达 1000000 token,表明模型能够将非常大量的引用内容纳入其理解范畴。模型支持 图片输入 true,意味着可以处理多模态的输入数据。同时,工具调用 true 的能力,使其能够与外部工具集成,执行更复杂的任务流程。

配 OceanBase 要定哪些

配置项建议取法这样取的依据
OCEANBASE_URLob://user:pass@host:port/database连接 OceanBase 实例的标准格式,确保服务可达。
ef_construction64HNSW 索引构建参数,影响召回质量与索引速度的平衡,此值兼顾性能与准确度。
m16HNSW 索引的邻居数量参数,控制搜索时的图遍历深度,提升召回效率。
query_k30检索时返回的向量条数,用于在召回阶段获取足够多潜在相关内容。
chunk_size800-1200 字符单个文档块的文本长度,平衡了语义完整性与模型处理效率。

这两者互相约束的地方

这一档模型的百万级上下文长度与引用上限,为 OceanBase 向量检索结果提供了广阔的处理空间。召回条数与每段长度的乘积,必须控制在模型的总上下文预算之内,以避免输入超限。引用上限 quoteMaxToken 限制了所有引用内容合计的 token 预算,而 OceanBase 返回的是具体条数。谁先达到上限,取决于每条召回内容的平均 token 长度。当 OceanBase 的 ef_construction 和 m 等索引参数调大时,通常会提高召回的准确性,这意味着模型将接收到更高质量的检索结果,从而能更好地利用其庞大的上下文处理能力。

容易做错的三处

  • 日志中出现 connection refused 或 authentication failed:OCEANBASE_URL 配置的连接信息有误,导致无法连接到 OceanBase 实例。
  • 检索结果返回的 data 字段为空:向量库中没有符合查询条件的向量数据,或索引构建存在问题。
  • 模型输出内容与引用内容关联性差:ef_construction 或 m 参数设置过小,导致向量检索的准确度不足,未能召回最相关的段落。

怎么确认配好了

  • 执行一次简单的向量插入操作,并通过 OceanBase 客户端确认数据已成功写入。
  • 使用一个已知结果的查询,检查向量检索返回的条数是否符合预期,并评估召回内容的关联性。
  • 运行一次端到端的 RAG 流程,观察模型输出是否合理引用了向量库召回的内容,并评估引用内容的 token 总量是否在 quoteMaxToken 预算内。
  • 监控 OceanBase 的 CPU 和内存使用情况,确保在实际负载下系统运行稳定,未出现资源瓶颈。

参考资料