LangSmithのファインチューニング用CLI smithtuneがFireworksAI_HQとbasetenで学習
LangSmithのファインチューニングには専用CLIのsmithtuneがあり、Ankush Golaは試せるとしている。LangSmithから軌跡を取得・選択・処理し、FireworksAI_HQとbasetenで学習したうえで、結果をLangSmithで評価する。コードはsmithtuneリポジトリにある。
関連AIニュース
Fireworks、LangSmith Fine-Tuningとsmithtuneのローンチ時トレーニングパートナーだと表明
Fireworksは、LangChainのLangSmith Fine-Tuningとsmithtuneのローンチ時トレーニングパートナーだと述べ、LangSmithのトレースからFireworks上のマネージドSFT、その後の評価とデプロイまでを、別のトレーニング基盤なしで1つのCLIで進める経路だと説明している。
LangSmith Custom Appsが一般提供を開始
LangChainによると、LangSmith Custom Appsはプロンプトでエージェントデータからインターフェースを作成でき、実行へのラベル付け、実験の比較、トレースの確認といったビューを含む。
LangSmith Engine v2がレッドチーミングと検証済み修正を追加
LangChainはInterruptでLangSmith Engine v2を発表した。本番前にエージェントの問題を特定し、提案された修正をユーザーに示す前にテストし、非効率なエージェントの処理とともにコストとレイテンシの傾向を示す。
LangChain、InterruptでLangSmith Engine v2を発表
LangChainはInterruptでLangSmith Engine v2を発表し、エージェントの問題を事前に見つけ、ユーザーが目にする前に解決できるとしている。
LangChain、9月30日にLangSmithのTuned Evaluatorsに関するセッションを開催
セッションでは、オンライン評価の要点と、チームがTuned Evaluatorsを使ってエージェントのやり取りを分析し、本番トレースにフィードバックを付与する方法を扱う。