Claude Mythos 5のUK AISIサイバー評価インシデントとは?アライメント評価記事を解説

`/v1/user_profiles` のリリースにより、API リクエストごとにエンドカスタマーを指定し、安全性措置を組織全体ではなく該当顧客1人に限定可能に。Admin API には user profile の制限・BAN を通知する組織 Webhook(ベータ、アクセス申請制)が追加。Managed Agents の web_search が組織のドメイン制限に従う挙動変更も含め、マルチテナント運用・再販事業者向けの対応手順を整理。

TypeSafe AI の Jev（選択肢分類モデル）を使い、依頼メッセージを 19 件の案件に自動振り分けする実験を行った結果、正解率 22.4% に留まった。応答速度と料金は公表値どおりだが、単語の重複で誤分類したり、似た案件を取り違えたりするため、確信度でも足切りできず、ベースラインの 73.7%（全部同じ案件と答える）にも劣った。実装時の伏せ字処理が重要で、本番前に必ず検証が必要という知見も共有。

フリーランスエンジニアの案件探しにおける求人票照合・適合判定・応募文作成を自動化するツールの開発事例。スキルシートと希望条件を事前登録すれば、Claude の tool_choice で構造化出力を強制し、経験年数判定を閾値ベースで後処理することで判定精度を高める実装方式を紹介している。

AWS IAM の customer managed policy を動的に書き換えることで、Gateway を経由しない Bedrock Runtime 呼び出しも含めて高額モデルを自動拒否する構成を実装・測定。ユーザー予算超過から IAM 反映までの遅延は約 11 秒で、invocation log 集計（数秒）と policy 更新（数秒）が支配的。cross-Region inference profile や段階的な制限にも対応可能。