アブレーション分析とは

LLMの振る舞いと評価

モデルやシステムの構成要素を取り除いたり置き換えたりして、結果の変化からその要素の貢献を調べる方法です。研究では、提案した仕組みのどの部分が性能に関わっているかを検証するために使われます。

実務で確認すること

例えばRAGからリランキングだけを外し、同じ質問群で回答の正確さを比較します。変更した部分を明記し、他の条件を揃えます。複数の要素が組み合わさって効果を出す場合もあるため、必要に応じて組み合わせも比較します。

参考資料

確認日:

用語一覧へ戻る