最初から最適でよい結果を生み出す接客サービスを行うのは困難です。配信結果を振り返り、施策のクリエイティブや対象の微調整を行うことで最適な接客サービスに磨き上げていくことができます。
ここではKARTEを使ったABテストによるアクションの最適化を紹介します。
ABテストとは
- 同じ条件のもとで2つ以上の選択肢を比べ、目的に対してどちらがより良い反応(CTR, CVR)を得られるかを探るテスト手法です。
ABテストの目的
- 実際に試さないと答えが分からない問題や、議論を重ねるよりも試したほうが早い問題に対し、何かしらの解を得るために行います。
ABテストの流れ
- 仮説構築 → クリエイティブ作成 → 実行 → 振り返り が大枠の流れです。
- ABテストする箇所が決まったら「今より良くするためにはどうすればよいか?」という視点で仮説・アイデアを出してみましょう。
- 1つのアイデアに対して1つのクリエイティブを作るようにしましょう。
- 振り返りをするときはABテストの期間や母数から、結果が信頼に足るものなのか意識するよう気をつけましょう。
ABテストの実施方法
- 接客サービスに複数アクションを登録することでABテストが可能です。
- このとき、接客サービスを配信しない「未実施」のグループ(コントロールグループ)を作成することで効果測定を適切に行うことができます。
ABテストの効果測定と注意点
- 接客詳細画面でABテストの結果(クリック率やゴール率)をひと目で比較することができるので、結果をみながら配信比率を調整するなどして接客の最適化を行いましょう。
- その際、配信数が少ない場合は結果がブレる可能性が高いため、信頼度やWIN・LOSEラベルを活用してください。
ABテスト実施のヒント
- 1つ1つの仮説の質にこだわるよりも、今よりよくするためにはどうすれば良いのか?という視点で色々とアイデアを考えてみましょう。