我们重新设计了 LangSmith 产品主页，并增强了资源标签，以改进您工作区内的组织。主页现在组织成三个关键区域，以与核心开发人员工作流程保持一致：可观测性、评估和提示工程。这三个区域细分为以下内容

• 可观测性 （用于快速识别问题并了解 LLM 应用程序随时间的性能）

  • 跟踪项目：通过数据点级别的跟踪分析来调试应用程序。

  • 仪表板：监控成本、延迟、质量和自定义 KPI 等指标。

• 评估 （通过评估数据集和突出显示回归来确保 LLM 应用程序的持续改进）

  • 数据集：策划和导入数据以推动实验。

  • 实验：运行评估并跟踪准确性和风格等指标。

  • 注释队列：简化人工审核以获得更好的反馈。

• 提示工程 （迭代和协作优化提示）

  • 提示：存储和版本控制提示，以进行团队协作。

  • 游乐场：实时迭代提示，大规模测试，并并排比较结果。

LangSmith 的资源标签现在还为组织工作区资产提供了更大的灵活性，包括

• 可自定义的分组：按项目、环境（例如，开发、暂存、生产）或自定义类别标记资源。

• 改进的筛选：使用默认或自定义标签快速定位资源。

• 即将推出：基于属性的访问控制 (ABAC)，用于基于标签属性的细粒度权限。

如何开始

1. 访问 smith.langchain.com 以探索新的主页。

2. 使用入门指南来导航可观测性、评估和提示工程。

3. 尝试使用资源标签来分组和组织工作区资产。

4. 使用应用内表单分享您的反馈——我们很乐意听取您的想法！