嵌入模型怎么选:升级嵌入层不踩全库重嵌的坑
嵌入模型升级 SOP(口径 2026-10-09,与开源篇/横评篇联动):换嵌入模型等于全库重嵌,这份 SOP 把决策与实操一次讲清。第零步对表现状:现有模型与维度、上下文、是否 MRL、部署形态、前缀约定,外加生产经验提醒(转述口径)——检索不对先加 reranker,分钟级的事别急着全库重嵌。选型五硬指标:参数/上下文/维度与 MRL/许可(HF API 实核 EG2=apache-2.0 ungated 但无 LICENSE 文件、Qwen3=apache-2.0、BGE-M3=mit)/部署形态;EmbeddingGemma 2 的 task prompt prefixes 是硬要求,查询 task: {...} | query: {...}、文档 title: {...} | text: {...},七种任务各有前缀,漏掉静默掉精度;encode(truncate_dim=512/256/128) 裁维省存储(最多 6 倍)。实操五步:sentence-transformers>=6.1.0 新旧双跑(同题抽查对账)→ 灰度切流(流程框架,不编比例)→ 全量重嵌与对账退役 → 评估闭环(Ragas/DeepEval,链站内 RAG 评估篇)。仓库地址明文:github.com/UKPLab/sentence-transformers、huggingface.co/google/embeddinggemma-2。