技術文書RAGの検索品質・ハルシネーション対策・コストを実測する
出典: Zenn (Claude topic)
Hiroba による自動要約
Claudeの公式ドキュメント66ページを対象にしたRAGシステムについて、検索品質(recall@1/recall@3/MRR)、ハルシネーション抑制、1クエリあたりのコストを評価ハーネスで実測した結果を報告。リランカーはハイブリッド検索で難易度の高い質問のみに効果があり、素のRRFは順位を悪化させることが判明。
出典・元記事
Zenn (Claude topic) の記事を Hiroba が自動要約しました。元記事を読む
読んで良かったら、シェアしてみてください。
同じタグの記事が他に 5765 件あります。
関連する記事
同じタグの記事


Claude API 2026-10-21の破壊的変更を自作ツールで検証——SDK 2.0でtemperatureが消えた
Qiita約3年ぶりのAPIバージョン 2026-10-21 で `temperature` / `top_p` / `top_k` が既定値でも400エラーとなり、Python 2.0.0 など新メジャーSDKは既定でこの版を送信。認証ヘッダの `Authorization: Bearer` 化、MessageParam の型変更も含め、Python SDK 新旧の差分を MockTransport で実測。上限なしの依存指定がもたらす httpx2 移行リスクにも言及しており、Claude API 利用中の開発者向けの移行チェック事例。

