要点
- 著者は発報が多いのに Slack 上の反応が無いモニターを「形骸化」とみなし、型・原因・次のアクションを Jev に Choice / Noul で聞いたと述べている
- 一次の「形骸化しているか」は4件×3回すべて正解。型・原因・アクションは36問中17問正解で、確信度0.7以上の答えはすべて正解だったと報告している
- 同じ入力の Claude と比較して、詳細判定は Claude、速さは Jev、確信度の低いものだけ人手または LLM に回す使い分けを提案している
何が変わるか
運用アラートの棚卸しで、Jev を「全部任せる」のではなく「一次判定と自信の低い件の振り分け」に置く例。件数は小さく、しきい値も著者の観察である。