日期
作者
LangChain团队
LangSmith SaaS

🔧 开箱即用的在线评估器提示,用于捕获RAG的错误检索和幻觉

日期:
作者: LangChain团队

LangSmith的在线评估器(LLM即法官)使用可自定义的提示和自动化规则在生产跟踪上自动运行。我们新的开箱即用评估器为您提供一个自定义提示,可以

  • 标记检索到的文档是否与用户输入问题相关(文档相关性)

  • 检查RAG响应中是否存在幻觉(幻觉)

  • 检查RAG答案是否有助于解决问题,无需标准答案(答案有用性)

  • 根据特定标准标记,例如针对毒性(标记)

奖励: 观看此视频查看文档,了解如何使用LangSmith建立护栏以检测包含PII或有害查询的用户输入。

由LaunchNotes强力驱动