日期
作者
LangChain 团队
LangSmith SaaS

🚀 LangSmith 已正式发布!此外,LangSmith 中有更好的监控功能

日期:
作者: LangChain 团队

LangSmith 现在已正式发布

LangSmith 现在已全面可用 - 无需再等待候补名单!在此处免费注册: here

LangSmith 中的新功能

  • 更好的监控。 我们很高兴在 LangSmith 中推出按元数据和标签分组的监控图表。现在比以往任何时候都更容易查看不同细分市场的表现,或查看特定客户在您的产品中的体验。阅读如何在 博客 上设置标签和元数据,并了解此功能解锁的可见性类型。

  • 成本可见性。 成本跟踪功能已上线!!我们已经跟踪总 token 一段时间了,现在用户可以在他们的 traces 和监控选项卡中看到他们在 LLM 调用上花费了多少。这对于理解权衡和应用程序的 ROI 非常重要。我们计划让用户添加自定义费率,因此如果您有特殊定价,LangSmith 仍然可以为您提供准确的支出视图。

  • 回归测试。 图表现在在测试视图中可用,因此您现在可以在应用程序的不同迭代中直观地看到性能如何变化。更快地发现回归或改进。

  • 注释队列反馈准则。 我们添加了一个结构化的反馈准则,以帮助简化注释。此功能使用户能够创建具有预定义类别的自定义反馈键。准则将显示在您 LangSmith 组织中的注释队列中,然后将在提交时验证反馈。

  • Trace 采样。 我们还对 LangSmith SDK 进行了一些更改,包括自动批处理以获得更好的性能和 trace 采样。继续升级到 python SDK 版本 >= 0.0.84 和 JS SDK 版本 >= 0.0.64 以查看。

  • 支持 Playground 中的 HuggingFace 模型。

由 LaunchNotes 提供支持