A/Bテストとは？
A/Bテストとは、利用者を無作為に二群へ分け、片方に現行案、もう片方に変更案を提示して、成果指標の差を比較する検証手法。意見や勘ではなく実データで施策を選ぶ、データ駆動の意思決定を支える基本的な実験方法として問われる。
えーびーてすと
A/Bテストの意味
利用者を無作為に二群へ分け、片方に現行案、もう片方に変更案を提示して、成果指標の差を比較する検証手法。意見や勘ではなく実データで施策を選ぶ、データ駆動の意思決定を支える基本的な実験方法として問われる。
A/Bテストの具体例
申込ボタンの文言を2案用意し、各群5,000人へ表示してコンバージョン率を比較する。差が1.8%対2.0%程度なら、偶然の変動と区別できるだけの標本数か（統計的有意か）を確認しないと採否を誤る。
A/Bテストは試験でどう引っ掛けられる？
同時に複数箇所を変えると、どの変更が効いたか分からなくなる。また差が出るまで観測を続けて有意になった時点で止める運用は、偶然の差を採用してしまう典型的な誤りである。
A/Bテストと関連する用語
最終更新：2026-08-25／解説は資格暗記が独自に作成しています。 過去問の出典は各問題に記載のとおりです。