RAG もハーネスも無しで、9つの LLM に Oracle 運用の 18問を解かせてみた
出典: Qiita (Claude tag)
Hiroba による自動要約
Oracle 運用ナレッジに関する 18問を RAG / ツール / ハーネスなしで Claude / Gemini / GPT など 9モデルに解かせ、モデル間の精度差を検証。実在しないビュー名・列名を含む設問により、ハルシネーションと正答を判別できるモデルの境界を特定した結果、DBA_HIST_SQL_PLAN の SNAP_ID 列の存在判定が上位 4モデルと下位 5モデルを分ける主指標となった。
出典・元記事
Qiita (Claude tag) の記事を Hiroba が自動要約しました。元記事を読む
読んで良かったら、シェアしてみてください。
同じタグの記事が他に 2991 件あります。
関連する記事
同じタグの記事



