A Web収益の向上が主目標の場合はCVRが重要指標です。ビジネスモデルやA/Bテストの目的により主目標が変わりますので、主目標の改善を支援するサービスとしてご理解ください。
Q 必ず改善できますか?
A 一般的には20~30%程度がテストあたりの勝率とされており、勝ちパターンは負けの考察から導き出されることが多いためトライ&エラーの数が重要です。また勝ったとしても、ひとつの改善だけで大きな成果を得られることはそうそうありません。小さな改善をコツコツと積み上げてトータルで大きな改善効果を目指します。
Q 既にA/Bテストに取り組んで改善してきましたが、それでもなお改善できると思いますか?
A どのようなABテストを実施されてきたのか、改善余地があるか過去実施されたテスト内容やサイト状況を確認させていただく必要がございます。既に十分なグロースをされている場合は難しい可能性がございます。
Q 現状より悪くなることはありますか?
A A/Bテストはリニューアルのように実際にリリースするものではなく、予め定めた割合のユーザーに一時的な配信でテストを行うものです。テスト期間中に現状以下の数値が出ることはございますが、マイナス度合いが大きい場合は停止可能です。