摘要:
一、引言 为什么同样是做 RAG,有的效果拔群,有的却差强人意?分块(Chunking)策略可能是那个被你忽略的关键环节。 什么是Chunk? AI中的分块是指将大型文档分割成称为“chunk”的较小片段。这些片段可以是段落、句子、词组或受token限制的片段,这使得模型能更轻松地仅搜索和检索所需内 阅读全文
posted @ 2025-11-26 18:06
京东云开发者
阅读(643)
评论(0)
推荐(0)
摘要:
1. 为什么要分区? 分区(partitions) 也被称为 分片(sharding),通常采用对数据进行分区的方式来增加系统的 可伸缩性,以此来面对非常大的数据集或非常高的吞吐量,避免出现热点。 分区通常和复制结合使用,使得每个分区的副本存储在多个节点上,保证数据副本的 高可用。如下图所示,如果数 阅读全文
posted @ 2025-11-26 18:06
京东云开发者
阅读(24)
评论(0)
推荐(0)
浙公网安备 33010602011771号