A/Bテストとは？
A/Bテストとは、対象者を無作為に2群へ振り分け、片方だけ施策を変えて結果指標を比べる実験。無作為化によって季節や顧客構成といった他の要因が両群で均されるため、観察データと違い因果関係を主張できる点に価値がある。Web施策の効果検証で広く使われる。
えーびーてすと
A/Bテストの意味
対象者を無作為に2群へ振り分け、片方だけ施策を変えて結果指標を比べる実験。無作為化によって季節や顧客構成といった他の要因が両群で均されるため、観察データと違い因果関係を主張できる点に価値がある。Web施策の効果検証で広く使われる。
A/Bテストの具体例
申込ボタンの文言をAとBで出し分け、各1万セッションで転換率2.4%対2.8%という差を得る。統計的検定で偶然とは考えにくいと確認できて初めてBを全面採用し、年間の増収額を見積もる。逆に差が無いと分かることにも同じ価値がある。
A/Bテストは試験でどう引っ掛けられる？
差が出ても有意とは限らず、サンプル不足や多数の指標を同時に見る多重比較で偶然の差を拾う。有利な時点で打ち切る途中の覗き見も誤りで、必要件数と期間を先に決めておく。
A/Bテストと関連する用語
最終更新：2026-08-25／解説は資格暗記が独自に作成しています。 過去問の出典は各問題に記載のとおりです。