Pengujian A / B - Pertanyaan Wawancara

Apa yang Anda pahami dengan Pengujian A / B? Apa tujuan di balik melakukan Pengujian A / B?

Pengujian A / B (juga dikenal sebagai pengujian Split) menentukan cara untuk compare two versionsaplikasi atau halaman web yang memungkinkan Anda menentukan, mana yang berkinerja lebih baik. Pengujian A / B adalah salah satu cara termudah, di mana Anda dapat memodifikasi aplikasi atau halaman web untuk membuat versi baru dan kemudian membandingkan kedua versi tersebut untuk menemukan tingkat konversi. Ini juga memberi tahu kami, yang merupakanbetter performer di antara dua.

Apa yang Anda pahami dengan pengambilan sampel data dalam Pengujian A / B?

Jumlah sampel bergantung pada jumlah pengujian yang dilakukan. Itucount of conversion rate disebut sampel dan proses pengumpulan sampel ini disebut pengambilan sampel.

Apa gunanya Confidence interval dalam Pengujian A / B?

Interval keyakinan disebut measurement of deviationdari rata-rata pada beberapa jumlah sampel. Mari kita asumsikan bahwa 22% orang lebih menyukai produk A, dengan +/- 2% interval kepercayaan. Interval ini menunjukkanupper and lower limit dari orang-orang, yang memilih Produk A dan juga dipanggil margin of error. Untuk hasil terbaik dalam survei rata-rata ini, margin kesalahan harus sekecil mungkin.

Kapan sebaiknya Anda memikirkan untuk melakukan pengujian A / B?

Selalu lakukan Pengujian A / B jika ada kemungkinan untuk beat the original variation by> 5%. Pengujian harus dijalankan untuk waktu yang cukup lama, sehingga Anda harus memiliki cukup data sampel untukperform statistics and analysis. Pengujian A / B juga memungkinkan Anda untuk mendapatkan hasil maksimal dari lalu lintas yang ada di halaman web.

Biaya meningkatkan konversi Anda minimal dibandingkan dengan biaya penyiapan lalu lintas di situs web Anda. ItuROI (return on investment) pada Pengujian A / B sangat besar, karena beberapa perubahan kecil pada situs web dapat menyebabkan peningkatan rasio konversi yang signifikan.

Apa itu pengujian multivariasi, dan bagaimana perbandingannya dengan pengujian A / B?

Seperti Pengujian A / B, Pengujian multivariasi didasarkan pada mekanisme yang sama, tetapi mekanisme tersebut compares higher number of variables, dan memberikan lebih banyak informasi tentang bagaimana variabel-variabel ini berperilaku. Dalam Pengujian A / B, Anda membagi lalu lintas halaman di antara berbagai versi desain. Pengujian multivariasi digunakan untuk mengukureffectiveness of each design.

Berapa banyak variabel yang harus saya uji?

Masalah dengan menguji beberapa variabel sekaligus adalah itu akan terjadi tough to accurately determinevariabel mana yang membuat perbedaan. Meskipun Anda dapat mengatakan satu halaman berkinerja lebih baik daripada yang lain, jika ada tiga atau empat variabel pada masing-masing, Anda tidak dapat memastikan mengapa salah satu variabel tersebut sebenarnya merugikan halaman, Anda juga tidak dapat mereplikasi variabelgood elements di halaman lain.

Sebutkan beberapa variasi yang dapat diterapkan ke halaman web?

Berikut adalah beberapa variasi Pengujian A / B yang dapat diterapkan pada halaman web. Daftar tersebut mencakup - Judul, Sub berita utama, Gambar, Teks, teks dan tombol CTA, Tautan, Lencana, Sebutan Media, Sebutan sosial, Promosi dan penawaran penjualan, Struktur harga, Opsi pengiriman, Opsi pembayaran, Navigasi situs, dan antarmuka pengguna.

Jelaskan proses langkah demi langkah untuk Pengujian A / B.

Background Research - Langkah pertama dalam Pengujian A / B adalah mencari tahu bounce ratedi situs web Anda. Ini dapat dilakukan dengan bantuan alat apa pun seperti Google Analytics.
Collect Data - Data dari Google Analytics dapat membantu Anda menemukan visitor behaviors. Selalu disarankan untuk mengumpulkan data yang cukup dari situs. Cobalah untuk menemukan halaman dengan tingkat konversi rendah atau tingkat drop-off tinggi yang dapat ditingkatkan.
Set Business Goals- Langkah selanjutnya adalah menetapkan tujuan konversi Anda. Temukanmetrics that determines apakah variasi tersebut lebih berhasil daripada versi aslinya.
Construct Hypothesis- Setelah sasaran dan metrik ditetapkan untuk Pengujian A / B, selanjutnya adalah menemukan ide untuk meningkatkan versi asli dan bagaimana mereka akan menjadi lebih baik daripada versi saat ini. Setelah Anda memiliki filelist of ideas, prioritize them dalam hal dampak yang diharapkan dan kesulitan implementasi.
Create Variations/Hypothesis - Ada banyak alat Pengujian A / B di pasaran yang memiliki a visual editoruntuk melakukan perubahan ini secara efektif. Keputusan utama untuk melakukan Pengujian A / B dengan sukses adalah dengan memilihcorrect tool.
Running the Variations - Tampilkan semua variasi situs web atau aplikasi Anda kepada pengunjung dan tindakan mereka dipantau untuk setiap variasi. Visitor interaction untuk setiap variasi diukur dan dibandingkan untuk menentukan bagaimana performa variasi tersebut.
Analyze Data - Setelah percobaan selesai, selanjutnya adalah analyze the results. Alat Pengujian A / B akan menyajikan data dari percobaan dan akan memberi tahu Anda perbedaan antara bagaimana berbagai variasi halaman web dilakukan. Juga jika ada perbedaan yang signifikan antara variasi dengan bantuan metode matematika dan statistik.

Apa jenis alat umum yang dapat digunakan untuk mengumpulkan data untuk Pengujian A / B?

Jenis alat pengumpulan data yang paling umum mencakup alat Analisis, Alat Putar Ulang, Alat Survei, Alat Obrolan dan Email.

Apa tujuan menggunakan alat Putar Ulang? Sebutkan beberapa alat Replay untuk Pengujian A / B.

Alat putar ulang digunakan untuk mendapatkan wawasan yang lebih baik tentang tindakan pengguna di situs web Anda. Ini juga memungkinkan Anda untukclick maps and heat maps of user clickdan untuk memeriksa seberapa jauh pengguna menjelajahi situs web. Alat putar ulang seperti Mouse Flow memungkinkan Anda melakukannyaview a visitor's session dengan cara Anda bersama pengunjung.

Alat pemutaran ulang video memberikan wawasan yang lebih dalam tentang seperti apa pengunjung yang menjelajahi berbagai halaman di situs web Anda. Alat yang paling umum digunakan adalahMouse Flow and Crazyegg.

Mengapa kami menggunakan alat survei? Berikan contoh survei untuk mengumpulkan data.

Alat survei digunakan untuk collect qualitative feedbackdari situs web. Ini melibatkan menanyakan pengunjung kembali beberapa pertanyaan survei. Survei tersebut menanyakan pertanyaan umum kepada mereka dan juga memungkinkan mereka untuk memasukkan pandangan mereka atau memilih dari pilihan yang telah disediakan sebelumnya.

Berikan beberapa contoh menghasilkan hipotesis dalam Pengujian A / B?

Anda dapat mengurangi jumlah rasio pentalan sebesar adding more imagesdi dasar. Anda dapat menambahkan tautan situs sosial untuk lebih meningkatkan tingkat konversi.

Apa yang Anda pahami dengan membuat variasi dalam Pengujian A / B? Apa alat umum yang dapat digunakan untuk ini?

Ada berbagai jenis variasi yang dapat diterapkan pada objek seperti menggunakan peluru, mengubah penomoran elemen kunci, mengubah font dan warna, dll. Ada banyak alat Pengujian A / B di pasar yang memiliki editor visual untuk dibuat. perubahan ini secara efektif. Keputusan utama untuk melakukan pengujian A / B dengan sukses adalah denganselecting the correct tool.

Alat yang paling umum tersedia adalah Pengoptimal Situs Web Visual, Eksperimen Konten Google, dan Optimizely.

Apa itu editor WYSIWYG di VWO? Bagaimana Anda membuat variasi dengan menggunakan itu?

Visual Website Optimizer atau VWO memungkinkan Anda melakukannya test multiple versionsdari halaman yang sama. Ini juga berisi editor 'apa yang Anda lihat adalah apa yang Anda dapatkan' (WYSIWYG) yang memungkinkan Anda melakukannyamake the changes and run teststanpa mengubah kode HTML halaman. Anda dapat memperbarui judul, penomoran elemen, dan menjalankan pengujian tanpa mengubah sumber daya TI.

Untuk membuat variasi dalam VWO untuk Pengujian A / B, buka halaman web Anda di editor WYSIWYG dan Anda dapat menerapkan banyak perubahan ke halaman web mana pun. Ini termasuk Ubah Teks, Ubah URL, Edit / Edit HTML, Atur Ulang dan Pindahkan.

Apa jenis pengujian lain yang dapat dilakukan dengan menggunakan VWO?

Pengoptimal Situs Web Visual juga menyediakan pilihan pengujian multivariasi dan berisi sejumlah alat lain untuk melakukan penargetan perilaku, peta panas, pengujian kegunaan, dll.

Di mana lagi Anda dapat menggunakan Pengujian A / B pada hal-hal selain halaman web?

Tes ini dapat diterapkan di beberapa tempat lain seperti Email, Aplikasi Seluler, PPC, dan CTA juga.

Apa yang Anda pahami dengan Pengujian A / B - Analisis Hasil?

Setelah percobaan selesai, next is to analyze the results. Alat Pengujian A / B akan menyajikan data dari percobaan dan akan memberi tahu Anda perbedaan antara bagaimana variasi yang berbeda dari halaman web tersebut dilakukan. Ini juga akan menunjukkan apakah ada perbedaan yang signifikan antara variasi yang menggunakan metode matematika dan statistik.

Bagaimana Anda mengintegrasikan Google Analytics dengan Optimizely?

Untuk mengintegrasikan Optimizely ke Universal Google Analytics, pertama-tama pilih tombol AKTIF di panel samping. Maka Anda harus memiliki fileavailable Custom to populate with Optimizely experiment data.

Kode pelacakan Universal Google Analytics harus ditempatkan di bawah bagian <head> pada halaman Anda. Integrasi Google Analytics tidak akan berfungsi dengan baik kecuali cuplikan Optimizely berada di atas cuplikan Analytics.

Apa perbedaan antara Universal GA dan Classic Google Analytics?

Google Analytics memiliki dua opsi untuk menganalisis data, yaitu Universal Analytics dan Google Analytics Klasik. Fitur Universal Analytics baru memungkinkan Anda menggunakan 20 pengujian A / B serentak yang mengirimkan data ke Google Analytics, namun versi Klasik hanya mengizinkan hingga lima pengujian.

Apakah Pengujian A / B berdampak negatif pada SEO? Jelaskan berbagai cara yang memastikan untuk menjalankan Pengujian A / B tanpa khawatir kehilangan Nilai SEO potensial?

Ini adalah mitos bahwa Pengujian A / B merugikan peringkat mesin pencari karena dapat diklasifikasikan sebagai konten duplikat. Empat cara berikut dapat diterapkan untuk memastikan bahwa Anda tidak kehilangan nilai SEO potensial, saat menjalankan Pengujian A / B.

Don’t Cloak - Penyelubungan adalah ketika Anda menampilkan satu versi laman web Anda kepada agen Googlebot dan versi lainnya kepada pengunjung situs web Anda.

Use ‘rel=canonical’- Jika Anda memiliki Pengujian A / B dengan beberapa URL, Anda dapat menambahkan 'rel = canonical' ke laman web untuk menunjukkan ke Google URL mana yang ingin Anda indeks. Google menyarankan untuk menggunakan elemen kanonik dan bukan tag noindex karena lebih sesuai dengan maksudnya.

Use 302 redirects and not 301’s - Google merekomendasikan untuk menggunakan metode arah sementara - 302 melalui pengalihan 301 permanen.

Don’t run experiments for a longer period of time - Harap dicatat bahwa ketika Tes A / B Anda selesai, Anda harus menghapus variasi secepat mungkin dan membuat perubahan pada halaman web Anda dan mulai menggunakan konversi yang menang.