概要
別のLLMに出力の良し悪しを採点させる、自動評価の手法。
詳しい解説
LLM-as-Judgeは、AIの出力の品質を、別の高性能なに採点させる評価手法です。人手評価より速く安価に、自由文の良し悪しを判定できます。やでは測りにくい「自然さ」「的確さ」を評価できる一方、評価役モデルの偏りや甘さに注意が必要で、と併用されます。
💡 青い破線の用語にカーソルを合わせる(タップする)と、その場で簡単な説明が表示されます。
具体例・活用シーン
AIが採点する
2つの回答をAIに見せ「どちらが優れているか」を判定させ、モデル比較に使います。
関連用語
この説明に誤りや改善点を見つけましたか?
✏️ この説明を改善提案する