跳到正文
原文
LangChain Blog·· 3 天前AI 评分40

LangSmith 推出 Alerts,实时监控 LLM 应用错误率、延迟与反馈分数

Catch production failures early with LangSmith Alerts

AI 导读

LangSmith 上线 Alerts 功能,可基于错误数与错误率、平均延迟、平均反馈分数三类指标设置告警,支持按模型、工具调用或 run 类型过滤,聚合窗口为 5 或 15 分钟,并可通过 PagerDuty 或自定义 webhook 推送通知。已向 LangSmith 发送生产 trace 的用户即可配置首个告警。后续将增加 run 数量、LLM token 用量告警及相对阈值告警。

来源:LangChain Blog · langchain.com