Claude Vision で抽出した LLM の出力を機械で検証する — TOEIC 学習アプリの 3 つの検算実装
ZennTOEIC 学習アプリで Claude Vision を使い、解説ページから正解、英文、SVOC 構造を自動抽出する際、LLM の出力が見た目は正常でも内部で誤っていることに気づき、「間違って書くより書かない」を原則に 3 つの機械的検算を実装した。SVOC の区切りを再結合して原文との一致確認、文型を役割の並びから再計算して LLM の申告と照合、日本語混在の英文を正規表現で除外することで、下流のすべての処理に影響する誤データの流入を防止した。