新しい広告素材に配信されないときのテスト設計

結論:新素材を追加しても配信額がほぼゼロなら、成果が悪いとは判定できない。既存の勝ち広告を守りながら、テスト目的、上限費用、期間、合否指標を先に決め、識別できる状態で試す。

テスト前に決める4項目

  1. 何を変えるか:訴求、冒頭、画像、形式など
  2. 何を変えないか:商品、リンク先、対象など
  3. 許容できるテスト費用
  4. いつ、どの数字で終了するか

比較不能を避ける

新素材だけでなくターゲットやページまで変えると、差の原因が特定できない。最初のテストでは主要な変更点を一つに絞る。

配信されたかを先に見る

クリック率やCPAの前に、各素材へどれだけ配信額と表示回数が付いたかを見る。十分に配信されていない素材を「負け」と記録しない。

勝ち広告を止めない

次の候補を探すために、現在の成果を支える広告を全面停止する必要はない。既存配信への影響を許容できる範囲に限定し、テスト後は結果と変更履歴を残す。