4年運用した日報システムの課題を Claude で解決した話

返品ポリシー文書の有無だけで、LLM の出力が「正しい業務回答」から「架空の規定に基づく誤回答」に反転する現象を検証。資料なしの場合、存在しない「8日以内」という返品期限を作り出し、本来は受付可能な10日目の返品を断定的に拒否した。情報の欠落を申告せず推測で埋める構造的な限界と、Projects / Claude Projects など「プロジェクト」機能による人間側の貼り忘れ回避策を解説。

LLM を用いたコードレビューをPR一次チェックとして1年運用した結果、スタイルの不統一と繰り返しパターンの検出には高い効果がある一方、業務ロジックの妥当性判定と複数ファイル・サービス間の整合性チェックは見落とされやすい。人間レビュアーはAIの得意領域に依存せず、ドメイン知識が必要な検証に集中する役割分担へ転換した。

案件面談前のスキルシート更新を効率化するため、Claude をシステムプロンプトで「採用担当者役」に設定し、一問一答での深掘り・面接練習・記事チェックの3モードで運用する仕組みを構築。実践を通じ、深掘りと簡潔さの両立、音声入力の誤認識確認、自動化の脆さなど 5 つの学習ポイントを整理し、定量的成果の具体化と表現精度の向上を実現。

Reddit の Claude コミュニティで、AI ツールの民主化に伴う課題が議論されている。低品質なアプリケーションやプロンプトの増加、市場の飽和、ユーザー体験の低下といった懸念が指摘されており、質と創意工夫の重要性が改めて問われている。