NEWS / 活用事例

Qiita:Jevの日本語分類をLivedoor等で検証

OpenRouter 経由の jev-1.13 で Livedoor と WRIME を zero-shot 評価した個人検証が Qiita に公開された。

要点

  • Qiita で、OpenRouter Decisions API の typesafe/jev-1.13 を使い Livedoor News と WRIME を zero-shot 分類した検証が公開された
  • 著者は Accuracy / Macro-F1 と API 費用の概算を個人計測として報告している
  • 公式ベンチマークではなく、日本語コーパスでの一実験である

何が変わるか

公式が英語寄りと述べる領域について、日本語コーパスでの手触りを知る材料になる。再現条件や日付依存があるため、数値は記事時点の報告として読む。

関連ガイド

出典・参考リンク

  1. コミュニティ Jevは日本語テキスト分類をzero-shotでどこまで解けるか:Livedoor News CorpusとWRIMEで検証