跳到主要内容

Embedding投影与向量检索索引

这条链路和文本索引有什么不同​

文本 BM25 索引拿到当前内容后可以直接分词写入;Embedding 索引还要调用模型,把每段 L1/L2 内容变成固定维度的向量。模型调用会超时、失败,返回的 profile、revision、dimension 也可能变,所以它不能简单套一层“读事件、写文件”。

这套实现把向量构建拆成几个可以恢复的小步骤:

  1. 读取 DOCUMENT 模型配置,确定 document embedding space。
  2. 用快照首页确定 snapshotWatermark,分批扫描 L1/L2 当前项。
  3. 每页逐条调用模型并写入候选 generation,成功后保存 cursor 和处理数量。
  4. 快照完成后,从快照水位之后连续追平 projection_change。
  5. 检查候选水位、文档数和 embedding space,最后切换 active generation。
  6. 查询侧使用 QUERY space 生成查询向量,确认它和文档 space 兼容,再进入 HNSW 查询。

Embedding 投影的快照、追平与激活

付费内容提示

该文档的全部内容仅对「码力全开」项目实战&技术讲解 知识星球用户开放

加入星球,一次获得完整项目资料、全栈技术知识库和长期答疑服务。

100万+字全栈技术知识库深入讲解技术核心、数据库、中间件和分布式等内容
9套热门的实战项目持续更新的企业级项目覆盖高并发、微服务、数据中台 和 AI Agent 等方向
AI 技术知识大模型面试详解覆盖 AI 模型原理、Agent、RAG、MCP、Skills、Harness 等核心知识点
文档 + 视频两种讲解形式既能系统阅读,也能跟随视频理解核心业务

完整项目实战资料

每套项目均包含从 0 到 1 讲解文档核心业务讲解视频

从基础项目到复杂业务场景,项目资料会持续更新。

9 套项目
  • 01Nexus Agent AI 智能体
  • 02Nexus Agent Pro 完全版
  • 03Agent Up Memory
  • 04黑马点评Plus
  • 05大麦
  • 06大麦Pro
  • 07大麦AI
  • 08流量切换
  • 09数据中台

加入后还能获得

进入星球后,即可享受上述所有服务,保证不会再有其他隐藏费用。

从学习、面试到项目启动,都可以继续获得支持。

  • 1 对 1 解答项目和技术问题都可以提问
  • 针对性补充没有讲清楚的内容会继续补充
  • 面试与简历指导梳理回答技巧和项目亮点
  • 中间件云环境项目依赖可以直接接入使用
  • 面试后复盘被问住的问题可以继续交流
  • 远程问题解决项目启动问题可协助排查
知识星球二维码

扫码进入知识星球

  1. 打开微信,扫描左侧二维码,加入「码力全开」项目实战&技术讲解 知识星球
  2. 查看星球使用指导,获取完整项目讲解资料索引
解锁全部付费内容
🎁优惠