跳到正文
原文
Reddit · r/LocalLLaMA· /u/Gailenstorm·· 2 小时前AI 评分30

NuMind 为 vLLM 推出免费多模态嵌入向量插件,利用 LLM 隐藏状态生成文本/图像嵌入

A "free" multi-modal "embedding" model (already) included with your LLM: vLLM plugin + upstream PR

AI 导读

NuMind 发布一个 Apache-2.0 开源的 vLLM 插件,通过在 chat API 中返回最后一个 decoder 层的隐藏状态向量,让已加载的 LLM 直接生成文本/图像嵌入向量。

来源:Reddit · r/LocalLLaMA · reddit.com