Jev-as-a-judge 现已在 LangSmith 中可用
LangChain 宣布，Jev-as-a-judge 现已在 LangSmith 中可用。
据 LangChain 称，该功能可以对每条生产轨迹（而非样本）打分，在成本不攀升的情况下检查每条轨迹的更多标准，并足够快地发现安全或安保问题以触发自动响应。详情见该公司帖文：https://www.langchain.com/blog/jev-is-now-available-in-langsmith-evals
相关AI快讯
LangSmith Custom Apps 现已正式发布
LangChain 表示，LangSmith Custom Apps 可以用一条提示词根据智能体数据生成界面，包括用于标注运行记录、对比实验和查看追踪的视图。
LangSmith Engine v2 新增红队测试与已验证修复
LangChain 在 Interrupt 发布 LangSmith Engine v2。它能在进入生产前识别智能体问题，在向用户展示前测试拟议修复，并呈现低效的智能体工作以及成本和延迟趋势。
LangChain 在 Interrupt 发布 LangSmith Engine v2
LangChain 在 Interrupt 发布 LangSmith Engine v2，并表示它能主动发现智能体问题，并在用户看到之前加以解决。
LangChain 将于 9 月 30 日举办 LangSmith Tuned Evaluators 专场
这场活动介绍在线评估的关键要素，以及团队如何用 Tuned Evaluators 分析智能体交互，并把反馈附加到生产环境的追踪记录上。
LangSmith 现已支持包括 Jev 和 SemIf 在内的决策模型
LangSmith 为受支持的决策模型提供每一步的可见性，包括 Jev 和 SemIf。