デジタルマーケティングではABテストは非常に有効な手法で、多くの企業様で取り組まれています。しかし、下記のようなことで悩まれているというお話もよくお聞きします。
- ABテストをやりすぎてネタが尽きてきた、勝率が上がらなくなってきた
- 勝ちパターンについてなぜ勝ったのかが分からず、再現性がない（CVR2.0%と2.2％という結果が出たがこの差は何なのか？具体的に何が良かったのか分からない）
- 上司へ結果を報告する時に勝った理由を説明できない
この記事では、ABテストの各パターンのユーザ行動を確認することで、「勝ちパターン」にもさらなる改善点があることを発見し、次の企画案出しにつなげた事例をご紹介します。
※ABテストの計測・分析方法についての記事はこちら
【ABテスト】同タイトル・同URLの各パターンを観察画面上で判別するには？
勝ちパターンがなぜ勝ったのかわからない
ある日用雑貨のECサイトでは、母の日ギフトの特集ページでABテストを行いました。
Aパターンは商品写真を目立せて商品の特徴の説明はないものにし、Bパターンは商品写真とともに商品の特徴の説明を入れた内容にしました。
そのABテストの数値結果を見てみると、AパターンはCVR2.0%、BパターンはCVR2.2％ で有意差ありという結果でした。
ただ、以前、別の特集ページで行ったABテストでは逆の結果、すなわち今回のAパターンのように商品写真が目立たせたものの方が勝ちパターンでした。
「なぜ今回は商品説明を厚くしたパターンが勝ったのだろう？」
この疑問を解消するために、USERGRAMでAパターンとBパターンを閲覧したユーザの動きを複数人見てみることにしました。
実は勝ちパターンでもスムーズにコンバージョンしている訳ではない？
すると、勝ったBパターンでもユーザがスムーズにコンバージョンしているわけではなく、どちらのパターンでもユーザ行動にはあまり違いがないことが分かりました。
具体的には、母の日ギフト特集を見た後に「よくあるお問い合わせ」から「ギフト用ラッピングについて」のページを確認してから購入（コンバージョン）しているユーザが、いずれのパターンでも多くいたのです。
＜USERGRAMで見られた実際のユーザの行動＞
実際にページを確認すると、特集ページにも商品詳細にもギフト用ラッピングの情報の記載が一切なく、ユーザにとって不親切になっていました。
これを受け、商品詳細の写真の大きさや説明内容がコンバージョンに与える影響は少なく、ギフト用ラッピングの情報を分かりやすく伝えることがCVRアップに有効そうだと考えた担当者。
特集ページには「ラッピング情報を分かりやすく記載」したり、「よくあるお問い合わせのギフト用ラッピングのページのリンクを貼る」というような改善案を出すことができ二次改善に繋げることができました。
ABテストの解釈に困ったらユーザ行動を見てみよう
このように、USERGRAMを使ってABテストの分析をすることで、ABテストの結果を正しく解釈することができ、二次改善・次なる企画出しに繋げることが可能になります。
実際に、ABテストを日常的に実施されている企業様では、USERGRAMの分析を検証と企画出しの業務フローの中に組み込むことで、
- 「ABテストの勝率が2倍に上がった」
- 「ABテストの際はクリエイティブの良し悪しだけではなく、ユーザがスムーズにコンバージョンしやすいような内容やその後の導線設計まで考えられるようになった」
というようなお声を頂いています。
ABテストの分析についてもっと知りたい！という方は
ぜひ、ABテストについての関連記事もご覧ください。
- ABテストの計測設定方法についてのご紹介
【ABテスト】同タイトル・同URLの各パターンを観察画面上で判別するには？ - 観察のポイントや具体的な分析方法が知りたい方は…
【ABテスト】定量データとUSERGRAMを使って効果的に分析する方法をご紹介！
