# Zenn：MLflow 3.17.0のJev連携をjudgeやトレースで試した記録

MLflow 3.17.0で加わったJev連携を、評価のjudge、SDK呼び出しのトレース、AI Gatewayで動かし、できることと制約をまとめた報告。

- 正規URL: https://jevguide.jp/news/zenn-rrioh-mlflow-3-17-jev-2026-10-09/
- 公開: 2026-10-10T22:11:02.195Z
- 更新: 2026-10-10T22:11:02.195Z
- 検証区分: 報道・記事ベース

## 要点

- 著者は、MLflow 3.17.0 で Jev を judge のモデルに指定する、TypeSafe SDK の呼び出しをトレースする、AI Gateway に登録する、の3つを試したと述べている
- MLflow 側のリリースノートにも、TypeSafe の judge、AI Gateway への Jev 追加、SDK の autolog などが載っている
- 著者は、`typesafe:/jev-latest` を judge のモデルに渡すと、理由文の代わりに確率がメタデータに残ると報告している。Score 型や複数質問の一括送信は judge からは使えないとも述べている

## 何が変わるか

MLflow で評価やトレースを回しているチームは、別のラッパーを書かずに Jev を判定役として試せる。0.5 以外のしきい値で判定したい場合は、メタデータの確率を自分で読む必要がある点に注意したい。

## 関連ガイド

- [AI Gateway 経由で使う](/guides/ai-gateway/)
- [質問の型](/guides/question-types/)
- [確率と confidence](/guides/reading-confidence/)

## 出典

- [MLflow 3.17.0 release notes](https://github.com/mlflow/mlflow/releases/tag/v3.17.0)
- [MLflow docs: TypeSafe judges](https://mlflow.org/docs/latest/genai/eval-monitor/scorers/llm-judge/custom-judges/typesafe/)
- [MLflow 3.17でJevが連携されたので試してみた](https://zenn.dev/rrioh/articles/c475f75a88cbdd)

---
typesafe.ai とは無関係の非公式ガイドです。
