检索时的数据加载问题

[bhxiaoxinba]

检索时，querynode加载segment，对于已建好索引的segment，会加载索引数据，对于未建索引的segment加载原始数据。
1）是否代表已建好索引的segment，原始数据只会占用磁盘空间，不会占用内存。
2）原始数据是否就没有其他用途了？
3）segment合并呢？

[yhmo]

原始数据不会删除，仍然占用磁盘空间。有些索引(比如IVF_FLAT/HNSW)里带有向量原始数据，不需要读磁盘，直接从索引里可获取向量数据。有些索引做了量化(比如IVF_PQ/IVF_SQ8)，索引里没有向量原始数据 ，如果查询需要返回向量数据，只能去存储里读上来(也可以用mmap映射)

保留原始向量数据，才能换索引，想换什么索引重建一下即可。

segment合并：
1 假设有segment A和B，都已建好索引，query node加载了A和B的索引进内存。
2 data node在后台合并A和B，合并成C
3 index node给C建索引
4 C建好索引后，query node加载C的索引，并从内存中清除A和B的索引
5 A和B这两个segment会被标记为deleted，等待milvus垃圾清理机制将它们的数据包括原始数据和索引数据从磁盘中删除