「新しい動画を作ったので、今の動画と比べたい。でも何を揃えて、何日回して、どの数字で決めればいいのか分からない」
動画広告のABテストで決めることは3つです。違いを1つに絞る、判定する数字と期間を配信前に決める、件数がたまるまで勝者を決めない。この3つが揃っていないテストは、配信を止めた時点で「なんとなくBが良さそう」という感想しか残りません。
以下、①何を比べるか ②配信前に決めること ③配信の設定 ④判定の仕方 ⑤結果の使い方、の順に見ていきます。改善全体の進め方(目標の決め方や、どこで成果が落ちているかの特定)はMeta広告の成果を改善する方法で扱っているので、ここではテストそのものの設計に絞ります。
この記事でやること
- 比べる違いを1つに絞り、優先する順番を決める
- 仮説・判定する数字・期間・止める条件を配信前に書く
- 通常配信と比較用の機能の違いを知る
- 件数が足りないうちに勝者を決めない
比べるのは「1つの違い」だけ
ABテストで分かるのは、AとBの違いが成果にどう効いたかです。冒頭も尺も音楽も同時に変えたBが勝っても、どれが効いたのかは分かりません。次の動画にも持ち越せる学びにならないので、一度に変える違いは1つにします。
動画広告で変えられる要素は多いですが、成果への効き方には大小があります。迷ったら、上から順に試してください。
| 比べる要素 | 例 |
|---|---|
| 訴求(選ぶ理由) | 「安さ」で選んでもらうか、「手間が減る」で選んでもらうか |
| 冒頭の入り方 | 悩みから入るか、商品の結果から入るか |
| 表現の形式 | アニメ調か、実写に近い映像か |
| 尺 | 15秒前後か、30秒以上か |
| 細部 | テロップの色、BGM、締めの一言 |
上の要素ほど、見る人が「自分に関係あるか」を判断する材料そのものを変えます。下の要素は、上が決まった後の仕上げです。訴求が合っていない動画のテロップの色を比べても、差が出にくく、出ても小さい差にとどまりがちです。
たとえば下の動画は、ゴルフ用インソールのEC販売用にpitattoが制作したものです。ゴルファーの悩みから入り、撮影では見せにくい商品の構造を図で見せています。これを「冒頭の入り方」で比べるなら、Bは中盤の構造図や締めはそのままに、冒頭だけを「履いた後の結果」から入る形に変えます。ここで紹介するのは構成の例で、この動画のABテストの結果ではありません。
冒頭の作り方は動画広告は冒頭3秒で決まる、尺の考え方は動画広告の最適な長さにまとめています。
配信前に決めておく4つのこと
テストが失敗する理由の多くは、配信を始めてから判定の基準を決めることです。数字を見てから基準を決めると、都合のいい数字を拾ってしまいます。配信前に、次の4つを1枚のメモに書いてください。
| 決めること | 書き方の例 |
|---|---|
| 仮説 | 悩みから入る冒頭のほうが、最後まで見られて申込が増える |
| 判定する数字 | 申込1件あたりの費用(補助として視聴継続率) |
| 期間 | 開始日と終了日。最低でも曜日を一巡させる |
| 止める条件 | 片方の費用だけが想定を大きく超えたら、その時点で止める |
判定する数字は、最終成果に近いものを選ぶ
判定する数字をCTR(クリック率)にすると、強い煽りでクリックを集める動画が勝ちやすくなります。クリックは増えても、LPで「思っていたのと違う」と離脱されれば、申込は増えません。判定は申込や購入など最終成果に近い数字で行い、CTRや視聴継続率は「なぜ勝ったか」を読むための補助にします。
どの数字を目標にするかの決め方は、動画広告のKPIの決め方で扱っています。
期間は「曜日を一巡」が下限
多くの商材は、平日と週末で見られ方も申込のされ方も変わります。3日だけ回すと、たまたま週末を含んだほうが勝つ、ということが起きます。最低でも7日、曜日を一巡させてから判定してください。購入まで検討期間が長い商材は、その分だけ期間を延ばします。
Metaの広告のA/Bテストには、推奨されるテスト期間の目安が公式ヘルプに示されています。仕様は変わることがあるので、テストを作るときにヘルプセンターの現行の記述を確認してください。
配信の設定:通常配信と比較用の機能は別物
同じ広告セットにAとBの動画を入れて普通に配信しても、きれいな比較にはなりません。MetaもGoogleも、成果が出そうな広告に配信を寄せる仕組みで動いているためです。配信の早い段階で片方に表示が偏り、もう片方は十分に見られないまま「負け」に見えることがあります。
通常配信でのこの偏り自体は悪いことではありません。成果を最大にするための動きなので、普段の運用ではそのまま任せて構いません。問題になるのは、「AとBのどちらが良いか」という因果を確かめたい場面だけです。
| やり方 | 向いている場面 |
|---|---|
| 同じ広告セットで並べて配信 | どちらが良いかより、全体の成果を優先したいとき |
| 媒体のA/Bテスト機能 | どちらが良いかを確かめて、次の制作に活かしたいとき |
媒体のA/Bテスト機能を使うと、配信する相手をAとBで重ならないように分けたうえで比べられます。Google広告の動画テストのヘルプでは、テストで保証されるのはテスト群の間でユーザーが重複しないことだと説明されています。Metaも広告マネージャでA/Bテストを作成できます。
揃えておくもの
機能を使う場合も、使わない場合も、比べる動画以外は揃えます。
- 配信の対象:年齢・地域・興味関心などのターゲット設定
- 配置:リール、フィード、ストーリーズなど
- 予算と入札:AとBで同じ
- 広告文とLP:テキストや遷移先を変えると、動画の違いが分からなくなる
- 期間中の変更:テスト中は設定を触らない
ここでよくあるのが、テストの途中で「Bの調子が悪いからターゲットを少し広げよう」と触ってしまうことです。触った時点で比較の前提が崩れるので、変えたくなったら一度テストを終えてから、新しいテストとして始めてください。
勝ち負けは件数がたまってから決める
ABテストで一番多い失敗は、件数が少ないうちに勝者を決めることです。
仮の数字で考えます。同じ予算で3日回して、Aの申込が3件、Bの申込が5件だったとします。Bの方が良さそうに見えますが、件数が少ないうちは、1〜2件の偶然で順位が入れ替わります。翌週に逆転していても不思議ではありません。
判定に必要な件数の考え方は、媒体のテスト機能にも表れています。Google広告の動画テストでは、コンバージョン系の指標でテスト群と対照群の差を計算するには、少なくとも100件のコンバージョンが必要とされています。CTRや動画の再生率など、件数が集まりやすい指標にはこの要件はありません。また結果には信頼度が表示され、ヘルプでは確実な結果が得られるようテストの完了まで待つことがすすめられています(いずれも2026年11月時点のヘルプの記述)。
Metaのテスト結果にも、結果がどのくらい確かかを示す値が表示されます。どの値から勝ちとみなすかは、ヘルプセンターの現行の記述を確認してください。
件数が集まらないときの選び方
予算が限られていて、期間内に申込が数件しか集まらないこともあります。その場合は、判定する数字を1段手前に下げます。
- 申込が集まらない → LPに来た人の数や、LPで次の行動をした人の数で比べる
- それも少ない → 視聴継続率やクリック率で比べ、勝った方を次は申込で確かめる
手前の数字で決めた勝ちは「仮の勝ち」です。クリック率で勝った動画が申込でも勝つとは限らないので、次のテストで最終成果まで確かめる前提で使ってください。
判定の前に確かめること
- 決めた期間を最後まで回したか
- 比べる動画以外の設定を、期間中に触っていないか
- 判定する数字の件数が十分にたまっているか
- 勝った理由を、補助の数字で説明できるか
結果は次の仮説に使う
テストが終わったら、勝った動画に予算を寄せるだけで終わらせないでください。残すべきなのは「なぜ勝ったか」です。
「悩みから入る冒頭が、結果から入る冒頭より申込単価が低かった」と分かれば、次は悩みの種類を変えて比べる、という次の仮説が立ちます。逆に、差が出なかったテストも記録に残します。「冒頭の入り方では差が出なかった」ことが分かれば、次は訴求そのものを比べる、と順番を上げられます。
記録には、少なくとも次を1行ずつ残してください。
- 比べた要素と、AとBの違い
- 期間・予算・配信の対象
- 判定した数字と、その件数
- 結果と、勝った理由の仮説
勝った動画も、配信を続けるうちに同じ人に何度も表示されて効きが落ちていきます。差し替えの時期の見方はクリエイティブ疲弊の見分け方にまとめています。
まとめ:次のテストの手順
- 比べる違いを1つに絞る(迷ったら訴求→冒頭→形式→尺→細部の順)
- 仮説・判定する数字・期間・止める条件を配信前に書く
- 因果を確かめたいときは、媒体のA/Bテスト機能を使う
- 比べる動画以外は揃え、テスト中は設定を触らない
- 件数がたまってから判定し、足りなければ1段手前の数字で仮の勝ちを決める
- 勝った理由を記録し、次の仮説にする
ABテストは、比べる動画が2本以上ないと始まりません。訴求や冒頭を変えたパターンを用意したいときは、状況に応じて2つの入口があります。
| 今の状況 | ご案内 |
|---|---|
| 何を比べればいいか分からない | 無料クリエイティブ診断/動画のURLと媒体を送るだけ |
| 比べるパターンを作りたい | 制作の相談と見積もり/撮影なし・企画から最短7日 |
制作会社として書いておかなければならないのは、テスト用に動画を増やせば成果が必ず改善する、とは言えないということです。動画広告の成果は、配信設定もLPも計測も市況も影響します。制作で改善できるのは、テストや数字の切り分けでクリエイティブが原因と特定できた部分です。
参考にした出典
- Google 広告 ヘルプ「動画テストを作成する」 — 変動要素を1つにすること、テスト群の設定
- Google 広告 ヘルプ「動画テストのパフォーマンスをモニタリングする」 — コンバージョン指標に必要な件数、信頼度、テスト群間でユーザーが重複しないこと
- Meta ビジネスヘルプセンター「A/Bテストのベストプラクティス」 — テスト期間と設定の推奨(現行の記述を確認)