日期 2024年5月27日 作者 LangChain团队 LangSmith SaaS 🔧 开箱即用的在线评估器提示,用于捕获RAG的错误检索和幻觉 日期: 2024年5月27日 作者: LangChain团队 LangSmith的在线评估器(LLM即法官)使用可自定义的提示和自动化规则在生产跟踪上自动运行。我们新的开箱即用评估器为您提供一个自定义提示,可以标记检索到的文档是否与用户输入问题相关(文档相关性)检查RAG响应中是否存在幻觉(幻觉)检查RAG答案是否有助于解决问题,无需标准答案(答案有用性)根据特定标准标记,例如针对毒性(标记)奖励: 观看此视频 或 查看文档,了解如何使用LangSmith建立护栏以检测包含PII或有害查询的用户输入。 由LaunchNotes强力驱动