跳到正文
掘金· 去伪存真·· 17 天前精选AI 评分72

如何用父子分块破解 RAG 切块大小与语义完整性的矛盾

架构思考与演进:如何彻底破解 RAG 切块大小与语义完整性的工程悖论?

AI 导读

文章提出用父子分块(Parent-Child Chunking)解耦 RAG 的检索单元与生成单元,子切片 128~256 Token 只做向量检索,父切片 800~2000 Token 只做上下文生成,两者通过 Parent_ID 关联。

借鉴点

能拿走父子分块的具体参数与五步检索流程,Child 128~256 Token、Parent 800~2000 Token、1:4 到 1:8,落到知识沉淀线替换单层切块;代价是要维护向量库与 KV 库的跨库一致性,还得处理 Rerank 只排子块不排父块。

来源:掘金 · juejin.cn