先了解这件事
AI 综述
2026年10月,Chroma 提出并评估基于令牌的检索评估方法及两种新分块策略。其方法在 token 级别评估检索性能,用 LLM 生成并过滤查询与相关片段,以 precision、recall 和 IoU(Jaccard 指数)衡量分块策略。研究发现分块策略对检索准确率和效率影响显著,部分流行策略的默认设置表现较差,而参数调优后的 RecursiveCharacterTextSplitter 等启发式方法表现良好。Chroma 还提出 ClusterSemanticChunker 和 LLMChunker 两种新策略,并开源了复现代码。目前尚无后续发展事实。
AI 根据公开报道生成
最新进展 · 正式报道
Chroma 如何评估 RAG 检索中的分块策略事件进展
1 个已确认进展
- 来源:Chroma Research
报道与讨论时间线
按时间查看正式报道与传播讨论;两类内容的证据等级保持独立。
10月9日
Chroma Research一手
Chroma 如何评估 RAG 检索中的分块策略
Chroma 提出在 token 级别评估检索性能的新方法,用 LLM 生成并过滤查询与相关片段,以 precision、recall 和 IoU(Jaccard 指数)衡量分块策略。研究发现分块策略对检索准确率和效率影响显著,部分流行策略的默认设置表现较差,而参数调优后的 RecursiveCharacterTextSplitter 等启发式方法表现良好。Chroma 还提出 ClusterSemanticChunker 和 LLMChunker 两种新策略,并开源了复现代码。