概要
2つの案を実際のユーザーに出し分け、どちらが優れるか比較する手法。
詳しい解説
A/Bテストは、2つの案(モデルやプロンプト、UIなど)を実際のユーザーに無作為に出し分け、成果指標を比較してどちらが優れるかを判定する手法です。AI開発では、新しいモデルやプロンプトを本番投入する前に、実利用での効果を確かめるのに使われます。客観的な意思決定の基盤です。
💡 青い破線の用語にカーソルを合わせる(タップする)と、その場で簡単な説明が表示されます。
具体例・活用シーン
実地で比較
ユーザーの半分に新モデル、半分に旧モデルを提供し、満足度や成功率を比べます。
関連用語
この説明に誤りや改善点を見つけましたか?
✏️ この説明を改善提案する