しんたろーのITアカデミー

なぜRAG開発は評価の仕組みが全てなのか。Claude Codeでコストを28%削減した技術的根拠

RAGを組んで動かしたとき、「これ本当に正しく動いてる？」という壁にぶつかる。モデルやプロンプトを調整しても、測定する仕組みがなければ改善なのかノイズなのか判断できない。 RAG開発において、モデル選びよりも先に評価ハーネス（測定の仕組み）を作る。 揺れのない決定論的な指標で測定軸を固定すると、無駄を削れた割合が明確な数値で分かる。検索精度を維持したままAPI使用量を削減できた割合は28%だ。