2つのバージョンを試して、良いほうを残す

テストの実行の流れ

スタジオで保存済みのバージョンを選び、Test against live を選びます。すると Briks は、テスト前に公開されていたバージョンと、選んだバージョンの両方を配信します。訪問者はどちらか一方に振り分けられ、Cookieで固定されるため、同じバージョンを見続けます。

振り分けの割合は5〜95パーセントの範囲で自由に決められ、初期設定は半々です。思い切った変更で、学びながらリスクを抑えたいときは、少ない割合が向いています。

テストの実行中はバージョンがロックされるので、その間ほかの変更は入りません。結果が出たら、1つのバージョンを残してテストを終了すると、そのバージョンが公開されたままになります。

コンバージョンとして数えるもの

テストの信頼性は、何を数えるかで決まります。Briksは、小さなビジネスにとって大切な行動を数えます。電話番号やメールアドレスのタップ、フォームの送信、サイトの主なアクションのクリックです。訪問者は1人につき1回だけ数え、コンバージョンは最大1回です。そのため、熱心な訪問者が電話番号を5回タップしても、結果は傾きません。

各バージョンについて、スタジオには、表示された訪問者数のうち何人がコンバージョンしたか、コンバージョン率、両者のコンバージョンの差、そして新バージョンが本当に優れている確率が表示されます。

この確率は落ち着いて読み取ってください。各バージョンの訪問者が約100人に達するまでは、スタジオは「まだ訪問者を集めています」と表示します。確率がどちらかで95パーセントを超えると、どちらのバージョンがかなり優れていそうかを表示します。その間は、まだはっきりした勝者はいないと表示します。

小規模サイト向けの良いテスト

テストは一度にひとつのアイデアだけにしましょう。見出し、セクションの順番、メインボタンの文言などです。新しいバージョンで5つ変えて勝っても、どの変更が効いたのかは分かりません。

小規模なサイトは訪問者が少ないため、テストには十分な期間を取ってください。週に数百人の訪問があるサイトでは、はっきりした結果が出るまで数週間かかることがあり、結果が出ないテストもあります。それも一つの答えです。変更による差はほとんどなかったということなので、好きなほうを選んでください。

このテストはクッキーで各訪問者を同じバージョンに保つため、サイトのクッキーに関する通知で触れておく必要があります。アナリティクス自体は、クッキーなしで集計します。

テストと推測の比較

テストをしないと、変更とその結果が、その月に起きた他のこと、たとえば季節、反響のあった投稿、競合のセールなどと混ざって届きます。テストでは2つのバージョンを同じ週に訪問者へ表示するので、両者の差は変更によるものと考えられます。

これは、よくない案からあなたを守る役目もあります。リスクのある変更をまず一部の訪問者にだけ見せ、結果が悪ければ、それまで公開していたバージョンを残してテストを終了できます。