Mengukur Hasil
Pada bab ini, kita akan membahas tentang bagaimana mengukur hasil dan menyederhanakan statistik dari pengujian yang dilakukan di website.
Memahami Statistik
Peneliti mungkin atau mungkin tidak memahami statistik. Namun, alat Pengujian A / B terbukti menjadi penyelamat dengan menyederhanakan statistik tersebut. Sehingga banyak perhitungan yang bisa dihindari. Sebagian besar alat pengujian konsisten dalam menggunakan 95% kriteria sebagai penyelesaian sasaran yang berhasil.
Itu berarti dari 10 Anda adalah pemenang dengan 9. Mari kita ambil contoh. Laporan alat pengujian Anda adalah sebagai berikut -
| Variasi | Tingkat konversi |
|---|---|
| Halaman kontrol | 1,91% |
| 1 | 2,39% |
| 2 | 2,16% |
| 3 | 3,10% |
Laporan ini memprediksi lebih banyak atau kurang 0,20% varian tingkat konversi pada interval 95%. Secara statistik, kisaran sasaran adalah antara 1,76 dan 2,06.
Mengambil Wawasan
Saat merencanakan tes, saya mengingat dua tujuan. Pertama, meningkatkan pendapatan dan yang lainnya adalah mengambil wawasan tentang apa yang mendorong ROI yang lebih tinggi.
Misalnya, dalam studi kasus kami mengalihkan lalu lintas ke halaman produk daripada halaman kategori atau beranda meningkatkan tingkat konversi atau tidak. Kami mengambil tiga variasi, salah satunya kami mengarahkan lalu lintas di beranda yang dimuat dengan kategori dan subkategori yang mengarahkan lebih jauh ke halaman produk. Yang kedua, kami mengarahkan lalu lintas ke filter penambahan halaman kategori. Yang ketiga, kami mengarahkannya langsung ke halaman detail produk dengan tombol beli.
Yang mengejutkan saya, variasi ketiga menang. Ini hanyalah informasi yang dibutuhkan oleh pembeli tentang produk. Ini memungkinkan kami mempelajari bagaimana peningkatan rasio konversi dan peningkatan berkelanjutan dapat membuat kami meningkatkan prospek.
Tidak diragukan lagi, menambahkan banyak variasi dan wawasan selama pengujian memberi kami desain ulang situs web.
Memahami Hasil
Biar saya jelaskan. TIDAK SEMUA UJI MENANG. Ya, itu menyakitkan namun benar.
Ada tes yang memberi Anda hasil dalam warna terbang. Ada orang lain yang setelah begitu banyak mencoba juga tidak akan berhasil. Namun jika Anda merencanakan pengujian dengan segmentasi penggerak wawasan, Anda dapat memiliki hipotesis baru untuk diuji. Tidak semua pengujian membantu Anda meningkatkan pendapatan.
Ambil contoh untuk dipahami. Ada tiga kampanye dengan rasio konversi berbeda.
| Kampanye A | 8,2% |
| Kampanye B | 19,1% |
| Kampanye C | 5,2% |
Siapapun akan secara membabi buta mengatakan 'Kampanye B' adalah pemain super. Tapi mari kita gali lagi.
| Kunjungan | Transaksi | Tingkat konversi | |
|---|---|---|---|
| Kampanye A | 1820 | 150 | 8,2% |
| Kampanye B | 20 | 4 | 19,1% |
| Kampanye C | 780 | 41 | 5,2% |
Perhatikan dengan seksama, 'Kampanye B' terlalu kecil untuk menjadi signifikan secara statistik. Kampanye B dengan 1 transaksi dengan satu kunjungan akan memberikan tingkat konversi 100 persen. 'Kampanye A' tampil di atas 'Kampanye C'. Saat menyimpulkan hasil, ada beberapa faktor yang perlu dilihat dan mungkin berbeda setiap saat. Andalah yang perlu melihat semua wawasan dan memutuskan hasilnya.