有人想把 1024 维的新点 PCA 压到 768,好沿用线上已按 768 维长成的图。何时这是赌近邻没散,何时必须另起索引并回填?
题目
有人想把 1024 维的新点 PCA 压到 768,好沿用线上已按 768 维长成的图。何时这是赌近邻没散,何时必须另起索引并回填?
参考答案
点击展开参考答案
- 维度不同就是另一套坐标,旧 HNSW 的边按 768 维近邻长成,不能把 1024 维点投影后 upsert 进去当「邻居关系仍成立」。
- PCA 或任何线性压到 768,只有在你们的业务冻结集上证明投影后的排序接近「完整 1024 维新索引」时,才是可回滚的捷径;否则是在赌多出来的维是噪声、且主成分碰巧对齐旧空间。
- 默认做法:新维度新 collection,历史文档用新模型重算,双写、灰度、保留旧图回滚。
- 零填充、截断、硬塞不同 d 的点都会静默损坏距离。
- 索引假定固定 d 和同一度量。
- 1024 插进 768 会报错或被截断,截断等于丢掉模型认为有用的坐标。