Jev(TypeSafe)で業務依頼の振り分けを試したら正解率 22% だった
出典: Zenn (Claude topic)
Hiroba による自動要約
TypeSafe AI の Jev(選択肢分類モデル)を使い、依頼メッセージを 19 件の案件に自動振り分けする実験を行った結果、正解率 22.4% に留まった。応答速度と料金は公表値どおりだが、単語の重複で誤分類したり、似た案件を取り違えたりするため、確信度でも足切りできず、ベースラインの 73.7%(全部同じ案件と答える)にも劣った。実装時の伏せ字処理が重要で、本番前に必ず検証が必要という知見も共有。
出典・元記事
Zenn (Claude topic) の記事を Hiroba が自動要約しました。元記事を読む
読んで良かったら、シェアしてみてください。
同じタグの記事が他に 6457 件あります。
関連する記事
同じタグの記事


Claude ConsoleのIP許可リスト(ベータ)とAdmin APIの強制サインアウトを解説
Qiita2026年11月5日のリリースノートで追加された2つのベータ機能の解説。Claude Console の組織単位 IP 許可リスト (IPv4/IPv6/CIDR、最大1,000件) と、Claude Enterprise メンバーを全デバイスからサインアウトさせる Admin API エンドポイント `POST /v1/organizations/users/{user_id}/sign_out` の仕様と注意点を整理。API キー漏えいや端末紛失時の対応を担う組織管理者・セキュリティ担当向け。

Claude 向けに作ったメルマガ生成 AI を、さくらの AI Engine(gpt-oss)に載せ替えて本番に出すまで
ZennClaude 前提のメルマガ生成 AI を、国内処理の要望に応えるためさくらの AI Engine へ移行した実践記録。Anthropic 互換 API では構造化出力が無視されるため、OpenAI 互換 API と JSON スキーマ、zod による検査で解決。gpt-oss-120b・llm-jp・Qwen3.6 と Claude を同一プロンプト・同一材料で比較した結果と、本番投入後に出た空欄問題の対処も掲載。国内完結を求める API 利用者向け。
