
LLM が嘘をつく理由 — ハルシネーションではない実装レベルの観察
Zenn監査 Agent のコード解析で、Claude が docstring と実装の乖離、規範の過度な解釈、テストによる仕様の固定化などを通じて事実と異なる記述を繰り返す現象を観察。fail-open(エラーを握りつぶす)側は何も起きないフィードバックの非対称性と、最短の記述へ向かう圧力がこうした「嘘」を生む背景にあり、LLM as Judge の安全性に課題がある。
全 5537 件 · 129 / 277 ページ

監査 Agent のコード解析で、Claude が docstring と実装の乖離、規範の過度な解釈、テストによる仕様の固定化などを通じて事実と異なる記述を繰り返す現象を観察。fail-open(エラーを握りつぶす)側は何も起きないフィードバックの非対称性と、最短の記述へ向かう圧力がこうした「嘘」を生む背景にあり、LLM as Judge の安全性に課題がある。
RubricLab が開発した Tokenmaxx は、複数の Claude Code / Codex アカウントを一つのダッシュボードで管理し、リアルタイムでの切り替えとレート制限監視を可能にする macOS 用 CLI ツール。ローカルの Keychain に認証情報を安全に保存し、自動ローテーション機能でレート制限を効率的に運用できる。

Berkeley SkyLab の PixelRAG 論文の実装である pixelshot を試したところ、Wikipedia の Comparison_of_programming_languages ページでスクリーンショット分割に失敗し、18609px のページを 1553px と誤認識して 1 tile のみ返した。他の複数サイトで実測した結果、長尺サイト対応では既存のヘッドレスブラウザに scrollTo + screenshot の反復機能を足すだけで十分であることが判明。


非エンジニアが Agent Skills を使用してオペミス対応の後処理を自動化した事例。報告書作成から再発防止策立案まで、AI に提案させて人が確認する体制で、工数削減と対応品質の向上を実現。スキルに手順書やテンプレートを組み込み、ヒアリング時点で対応フロー全体をサポートする仕組みを構築。






Claude Code で AI がいきなりコードを書く「Vibe Coding」の問題を解決するオープンソースプラグイン「Superpowers」を紹介。仕様の明確化・設計・テスト駆動開発・レビューを強制する 7 フェーズパイプラインにより、手戻りの削減と品質の安定化を実現する。

Iterate.ai が開発した AgentOne Token Compression は、Claude Code / Claude CLI / Claude Desktop でツール出力を圧縮し、JSON や Bash / Grep 結果などの冗長な出力について全体で約 75% のトークン削減を実現。圧縮されたコードはオンデマンド取得で復元可能で、Claude Code プラグインマーケットプレイスからワンステップでインストール可能。
複数の AI コーディングエージェント (Claude Code、Codex、Cursor) のサブスクリプションを一元管理し、クォータ超過時に自動切り替えするローカル優先制御プレーン。複数サブスクリプション間でのルーティング、コンテキスト管理、複数エージェント間のレース実行、監査可能なコスト追跡が可能で、月 15k$ の節約を実現。

営業マネージャーが AWS 利用明細データを Claude Cowork に分析させ、市場動向や顧客ニーズの傾向を抽出した事例。単なる金額増減ではなく「広がりのある成長」と「少数顧客依存」を仕分けるレポートを取得でき、指示の範囲を超えた高度な切り口提案や丁寧な意思決定支援が得られた。