AIで広告コピーのA/Bテスト案を作る方法|訴求軸を分ける

広告copyのA/B案は、表現を増やす前に検証hypothesisを一つ決めます。

AIものさし編集部

広告コピーのA/Bテストは、AIに複数案を作らせた時点では始まりません。先に、誰に何を伝え、どの行動を改善したいのかという仮説を一つ決めます。比較する訴求要素以外のAudience、Offer、遷移先などを揃え、実際の配信データで判断します。AIの「勝ちそう」という予測や社内レビューの好みを、テスト結果として扱わないでください。

Copy制作とExperimentを分ける

広告案の制作はExperimentの準備段階です。案を複数作っても、配信条件や評価指標を決めていなければ、どの案が効いたかは分かりません。Google AdsのCustom experimentでは、元campaignとexperimentを比較する設定が案内されています。機能の対応campaign typeやtraffic/budgetの分け方は現行仕様を確認し、この仕組みをすべての広告媒体に当てはめないでください。

また、広告で伝える内容とLanding PageのOffer、条件、対象者を揃えます。Google AdsのMisrepresentation policyは、重要情報の省略や誤認を招く表現を問題として扱います。広告コピーを強くするために、原文にない「必ず」「最安」「何倍」などのclaimを足さず、根拠と条件を含めて審査します。

Experiment Brief

表は横にスクロールできます

Field設計すること例
Objectivebusiness goalと読者行動資料請求完了を改善
Audience対象の条件既存LPを閲覧した新規訪問者
Hypothesis何がなぜ変わるか導入手順の説明で不安が減る
Variable比較する主要素一つheadlineのbenefit
Keep constantそれ以外の条件offer、LP、期間
Primary metric主評価指標完了数 / 対象クリック数
Guardrail悪化させたくない指標苦情、非表示、離脱
Evidenceclaimを裏付けるSourceproduct仕様、case study
Stop rule途中停止条件表示不具合、claim誤り

表は設計例です。「完了数 / 対象クリック数」が常に正しいmetricという意味ではなく、導線と計測可能性に合わせて決めます。目的が認知ならclickだけでは不十分かもしれず、問い合わせ数ならLead品質も確認が要ります。主指標は開始前に定義し、結果を見てから成功条件を変えないでください。

仮説から案へ落とす

仮説は、対象者、条件、望む行動、根拠を含む一文にします。

「担当者向けに、初期設定が5分で終わると伝えると申込が増える」では、時間claimを検証し根拠がある場合のみ採用できます。裏付けがないなら、時間を断定せず「設定手順を確認できる」など証明可能な表現へ変えます。


Audience:[対象]

Product / Offer:[提供内容と条件]

Landing page:[遷移先]

Hypothesis:[対象者の課題、変更する訴求、予想行動]

Variable:[Headline / Benefit / CTAなど一つ]

Keep constant:[対象、予算、期間、遷移先等]

Source:[各claimの一次根拠]

CTA:[遷移先で実行可能な行動]

Output: Variant A / B / C

各案はHeadline / Description / CTA / Evidenceで作成。

Sourceにない数字、保証、期限、比較優位を追加しない。

AI案を受け取ったら、本文に対する固有claimを一つずつ根拠へ紐付けます。比較対象の案で主変数以外が変わっていないか、同じ条件で読者が判断できるかを編集者が確認します。

配信前のQuality Gate

  • 広告主張は商品・サービスの確認済み情報と合っているか。

  • Offer、価格、期間、対象者、除外条件がLPと一致しているか。

  • CTAは実際に用意された手続き・ページへ進むか。

  • 数字、比較、実績、推薦、保証に根拠があり、適用条件も見えるか。

  • 広告とLPの表示内容に矛盾や重要情報の欠落がないか。

  • クリエイティブ、計測タグ、遷移先が選んだexperiment条件どおりか。

  • 両案の違いが意図した主変数に絞られているか。

配信と評価

比較設計に応じて、開始日、終了条件、traffic / budgetの割り当て、対象campaign、期間中の編集を記録します。Google Adsの案内では、元campaignとexperimentの変更が結果の解釈を難しくする可能性が説明されています。並行して元campaignや試験案を変更した場合は、その内容と時期を記録し、比較への影響を注記します。

配信後は、同じ期間、同じmetric定義で結果を比べます。クリック率だけが上がっても、遷移後の行動が悪化しているなら、目的を満たしたとは限りません。母数不足や季節変動がある場合は結論を保留します。必要な観測量はbaselineやaudience、配信方式で変わるため、固定の数値を「十分なsample」として宣言しません。

表は横にスクロールできます

Variant実配信期間対象・配信条件実績品質/guardrail解釈・次の仮説
A
B

失敗時の切り分け

配信されない場合は、copyだけを疑わず、審査状況、予算、対象条件、tracking、landing page、campaign statusを確認します。LPと広告のURLやOfferが一致しないときは、コピー変更より先にdestinationを直します。クリックが集まらない場合も、訴求が悪いと断定せず、表示回数、対象者、配信時間、クリエイティブの表示崩れを確認します。

テスト途中で誤った価格や条件が見つかったら、一旦該当案を止め、修正後に再開するか、新しい実験として記録するかを決めます。元の比較へ別要素を足したまま結果を合算しないでください。

AIものさしの判断

一つの仮説を、実配信で検証できるcopy案へ変換できる状態が開始条件です。まず主指標、固定条件、停止ルール、claim根拠を決められるなら配信へ進みます。どれかが未定なら、AI案を「候補」として保存する段階に留めます。結果を解釈できない設計で広告費を使うより、測定条件を整えてから実施する方が、次の改善に使える学びを残せます。

Metricの定義と判定票

表は横にスクロールできます

指標分子 / 分母何が分かるか注意
CTRクリック / 表示など表示からの反応媒体定義を確認
CVR完了 / クリックまたは訪問遷移後の行動attribution条件が必要
Lead quality条件に合うLead / Lead全体問い合わせの適合判定基準を先に定義
Complaint rate苦情 / 対象配信誤認・不快感のSignal母数と受付経路を確認

同じ指標名でも計測定義やattribution windowが異なると単純比較できません。広告管理画面と分析環境の集計差がある場合は、採用するSourceと期間を決めます。結果表には実績値だけでなく、表示機会、配信条件、欠測、修正内容を書きます。

試験の終了基準は、配信前に目的と計測条件に合わせます。「一週間で必ず勝者を決める」などの固定期間やサンプル数を万能基準として扱わず、予算、traffic、変換までの時間、媒体仕様に応じて設定します。途中でデータを何度も確認して停止判断を変える場合は、その運用が結論へ与える影響を記録します。

Copyと計測の責任分担

AIは案を生成し、編集者はclaimとLPの整合を確認し、運用担当者は配信条件と計測の正しさを確認します。誰が何を承認したかを残すと、結果が悪いときに「copy」「Offer」「audience」「tracking」のどこから調べるか絞れます。広告案の承認と実験結果の解釈を同じチェック欄に混ぜないことが重要です。

Creativeの表示崩れ、計測タグの欠落、URLのredirect、Offer変更が見つかったら、その案のデータを別扱いにするか、実験を再設計します。欠陥のある案を含む期間全体を「勝敗」としてまとめず、影響範囲と除外理由を記録します。

判断を次の実験へつなぐ

結果が一方を支持した場合でも、学びは「このAudience、このOffer、この期間、この主変数の範囲」で記録します。別商品や別の季節へ一般化する前に、再現する条件を検討します。差が不明なら、仮説を棄却したと決めつけず、計測、対象、表現、配信機会のどこが不足したかを次のbriefへ残します。

学びをコピー資産へ戻す

結果を再利用するなら、単なる勝ち案の保管ではなく、訴求仮説、根拠、対象、条件、測定結果をセットで残します。営業資料やLPへ転用するときは、元の広告で確認したAudienceやOfferと適用先が同じかを再評価し、広告成果を製品全体の性能証明として使わないでください。

開始前の責任者確認も記録します。copyの事実確認者、法務・ブランド承認者、配信担当、計測担当を分け、誰が停止判断を持つか決めます。価格やOfferの更新が配信中にあった場合、古い条件を表示する案を残さず、停止して修正する手順を用意します。投稿後にLPの変更や在庫切れが起きた場合も、広告の表示内容と実際の提供条件を再確認してください。テスト結果は、配信条件が正しく実行され、計測の欠落がないと確認できてから解釈します。

引用・データ出典