A/Bテストとは
A/Bテストとは、案Aと案Bのように複数の案を同時に提示し、どちらが目的の指標に良い結果を出すかを比べる実験です。
平たく言えば、「どちらが良さそうか」を意見ではなく、実際の利用者の反応で決めるための方法です。ページの見出し、ボタンの文言、メールの件名などによく使われます。
AとBは比べる案の名前で、三つ以上を比べる場合は多変量テストなどと呼ぶことがあります。元の案を基準（コントロール）、変えた案を対案と呼びます。
仕組み・ポイント
A/Bテストを正しく行うには、始める前に決めておくことがいくつかあります。
| 決めること | 内容 |
|---|---|
| 仮説 | 何を変えると、なぜ良くなると考えるか |
| 指標 | 何で良し悪しを判断するか（一つに絞る） |
| 割当 | 訪問者をどう振り分けるか（無作為に） |
| 期間 | いつまで続けるか（事前に決める） |
| 判断基準 | どの程度の差を意味があると見なすか |
手順は次の通りです。
- 仮説を一文で書く。
- 変更点は一つに絞る。複数を同時に変えると、どれが効いたか分からない。
- 訪問者を無作為にAとBへ振り分ける。
- 事前に決めた期間が終わるまで結果を見て判断しない。
- 結果と学びを記録する。
訪問者が少ない事業では、差が偶然なのか本当の違いなのか判断できません。その場合は、顧客への聞き取りで仮説を磨くほうが、実験より効果的なことがあります。
実務での使い方・具体例
架空のサービスの申込みページで、ボタンの文言を二案用意するとします。「無料で試す」と「相談してみる」という二つで、同じ期間に訪問者を半々に振り分けます。指標は、ボタンを押した人の割合ではなく、実際に問い合わせを完了した割合にします。
期間が終わった時点で結果を比べ、差が小さければ「どちらでも大差がない」と判断して、別の変更に時間を使います。差が大きければ、勝った案を採用し、なぜ効いたかを仮説として記録します。
結果の記録には、日付、対象、仮説、結果、次に試すことを書きます。蓄積すれば、新しく入った担当者も、過去の学びを引き継げます。
実験を始める前の確認
実験の前に、結果にかかわらず次の行動を決めておきます。たとえば「Bが良ければ採用、差がなければ現状維持」と明記します。結果を見てから解釈を変えると、都合のよい結論を選びやすくなります。祝日や広告の変更など、結果に影響する出来事の予定も確認しておきます。
よくある誤解と注意点
- 途中で結果を見て早く止めると、誤った結論を出しやすくなります。 期間は事前に決めた通りに守ります。
- 変更点を欠かさず一つに絞らないと、学びが残りません。
- 勝った案が、すべての顧客に当てはまるとは限りません。対象を絞った結果だと理解します。
- 小さな表現の違いに時間をかけすぎないようにします。顧客の課題に関わる大きな仮説を優先します。
関連用語
- CVR（コンバージョン率）：テストの判断に使うことが多い成果の割合。
- LPO（ランディングページ最適化）：ページ改善の中でA/Bテストを活用する取り組み。
- 仮説検証：仮説を立てて確かめる考え方全体。
- EFO（入力フォーム最適化）：フォームの改善でも使われる実験。
- CTR（クリック率）：見出しの比較に使われるクリックの割合。
- 関連する実践ノート：指標の定義を分母と期間まで含めてそろえる考え方をまとめています。
Otsumuに相談できること
実験は、仮説の質と、測る指標の決め方で価値が決まります。何を検証すべきか、少ない母数でどう学ぶかを一緒に検討できます。 Otsumuでは、指標の定義づけや計測の整え方を KPI設計のご支援 としてご相談いただけます。まだ考えが固まっていない段階でも構いませんので、状況の整理から 30分の無料相談 をご利用ください。
執筆：Otsumu株式会社 ／ 編集日 2026.10.04