使用 Sentence Transformers 训练和微调多向量嵌入模型
Training and Finetuning Multi-Vector Embedding Models with Sentence Transformers
Sentence Transformers v6.0 引入 MultiVectorEncoder 以支持 ColBERT 风格的延迟交互检索,并提供完整训练流程。作者用 100 万条医学问答对在单张 RTX 3090 上训练 14.5 小时后,微调模型在医学检索任务上 NDCG@10 达到 0.9139,比最强的零样本模型高出 0.062,验证了领域微调对多向量模型的显著提升效果。
原文给出了完整的训练脚本和消融实验数据,读者可以直接复用这个recipe来训练自己的多向量检索模型。
来源:Hugging Face Blog · huggingface.co
最近 7 天的更新
- Mistral 开放万亿参数模型 Mistral Large 4 权重,主打网络安全TechCrunch · AI·
- Mistral Large 4(Le Chonk)在 Hugging Face 发布Hugging Face Blog·
- Mistral 发布 Mistral Large 4:1T 参数 MoE 多模态模型Reddit · r/LocalLLaMA·
- Mistral 发布 1 万亿参数多模态模型 Mistral Large 4 开放权重Mistral AI·
- 谷歌发布 Gemini 4 Carbon,多项基准超越 Claude Opus 5.5,首发 Token 半价量子位 QbitAI·
- Google DeepMind 发布 Gemini 4 Carbon,距 Argon 仅两周The Decoder·
- Google 发布 Gemini 4 Carbon 模型,主打网络安全与长周期任务Hacker News · 首页·
- Google 在 Android Dev Summit 开放 Android 开发环境给第三方 AI Agent 并发布新 Gemini APIThe Decoder·
相关工具
- OlmoEarth v1.3 发布全球卫星嵌入模型与预计算数据84
- Liquid AI 发布 LFM3 多模态模型系列83
- Mistral Large 4(Le Chonk)在 Hugging Face 发布82
- Recursive 发布 Flint,首个由 Eureka Machine 参与研发的语言模型82
- Hugging Face 发布原生 PyTorch 后端 TorchTPU82
- Hugging Face $399 双足机器人 Microduck 开放预购,首日订单达 260 万美元79
- Mistral 开放万亿参数模型 Mistral Large 4 权重,主打网络安全78
- NVIDIA 发布 Nemotron 3.5 Transcribe 与 Granary v2 数据管线78
反向发现 · 这个工具相关的论文与提示词
去交叉发现 →关联论文 · 6
关联提示词 · 6
用麦肯锡工作法引导用户系统性地完成一个陌生行业的洞察分析
# Role:行业洞察分析 ## Background: 客户需要进行一个新的行业的洞察分析,但是由于不熟悉该行业,所以需要引导进行系统性的研究。 ## Attention: 首先,你要使用 中的部分进行引导用户的咨询问题。请遵循 中的流程,并按照 的目标进行分析。 ## Profile: - Author:nimbus - Version:1.0 - WXID:168007300 - Language:中文 - Description:一名资深的行业洞察分析顾问,拥有
用于 Stable Diffusion 生成漫画风男子奔跑场景,含正反向提示词与采样参数参考
absurdres, 8k, comic, viewfinder, 1 male, running, black hair, orange sun, blue sky Negative prompt: easynegative, canvas frame, cartoon, 3d, ((disfigured)), ((bad art)), ((deformed)), ((extra limbs)), ((close up)), ((b&w)), wierd colors, b
为客服聊天机器人构建含引用段落、预置FAQ及相关问题提示的提示词
构造提示词,包括问题和带引用标记的段落, 为常见的后续问题提前准备FAQ,并在回答中提示“相关问题”
根据知识库配置客服聊天机器人的角色、回答规范和多语言回复方式。
You are an experienced Customer Support Assistant. Your primary role is assisting customers with their enquiries related to ABC products and services. The details from the data source consist of all the details about ABC as your Knowledge B
用于RAG驱动的客户支持机器人,依据上下文回答问题、处理不明确请求并引导转人工。
## Instructions - Provide the user with answers from the given context. - If the user’s question is not clear, kindly ask them to clarify or rephrase. - If the answer is not included in the context, politely acknowledge your ignorance and d
用于网站或帮助中心的通用 FAQ 客服机器人,在非工作时间回复知识库问题并收集人工跟进信息。
Our team is offline. Business hours are {hours} ({time zone}). Answer what you can from the knowledge base. For anything you cannot resolve, collect the customer's name, contact, and a one-sentence description of the issue, then tell them: