覚えておくべき3つのポイント
A/Bテストを実施するにあたり、覚えておいていただきたいポイントが3つあります。
- ツールは必要不可欠だが、全てを解決してはくれない
A/Bテストの結果を数値化するためには、なんらかのアクセス解析ツールが導入されていることが大前提です。また、前述したA/Bテストツールも、運用の負荷を軽減してくれるでしょう。しかし、これらのツールを入れたからといって、ツールが自動的になんらかの解決策を出してくれるわけではありません。そのツールを最大限活用するためには、何を変更すればより改善がみられるかといった仮説や、データの検証方法などのテスト設計がとても重要なのです。 - 目的とゴールが明確なテスト設計が成功の鍵
これはオンライン、オフライン関係なくマーケティング活動全般に共通して言われている事ですが、テストを行う際にはその目的とゴールの明確化が必要です。これを怠ってしまうと、折角のテスト結果もうまくその次のステップに生かされることなく、埋没してしまう可能性が大いにあります。WebのA/Bテストであれば、コンバージョン率UPや離脱率の減少、売上金額UPなど比較的ゴールを数値的指標で示すことができますが、ゴールは欲張らずにひとつに絞込みましょう。 - テストする変更箇所はできるだけ最小単位に
A/Bテストを行う際は、変更箇所を最小限・最小単位に抑え、できるだけ比較している要素以外の要素を排除することがとても重要です。変更箇所が複数あってしまうと（例えばフォントのサイズとカラーなど）、どの変更が結果に影響を与えたのかを限定することができなくなるからです。この期間は、できるだけコンテンツの更新なども控えたほうがよいでしょう。
BtoBサイトのA/Bテスト事例：オムニチュア
さて、ここまで簡単にA/Bテストの理論について述べてきましたが、なんとなくイメージできましたでしょうか？とはいっても、小難しいことをつらつら並べてしまうと、なかなか頭に入りませんよね。（私はいつもそうなのですが。）
最近仕事でお世話になっているアクセス解析の先駆的企業オムニチュアで、米国本社で最近採用されたオンラインマーケティング・ディレクターが、着任後3ヶ月で自社サイトの最適化でリード獲得効果を飛躍的に向上させたとのお話を伺いました。その具体的なABテスト手法と結果が、レポートとしてまとめられたものを拝見させていただいたところ、とても良い事例だったのでオムニチュアさんにお願いし、BtoBの成功事例としてご紹介させていただくことにしました。
