Apa itu pengujian A/B dalam UX? | Riset UX #26

Pengujian A/B adalah metode penelitian yang sangat baik untuk menguji dua versi alternatif dari solusi tertentu pada saat yang sama. Baca artikel kami untuk mempelajari cara melakukan pengujian A/B dan melihat manfaat serta keterbatasannya.

Pengujian A/B dalam UX – daftar isi:

1. Apa itu pengujian A/B dalam konteks penelitian UX?
2. Kapan menerapkan pengujian A/B?
3. Bagaimana cara melakukan pengujian A/B?
4. Ringkasan

Apa itu pengujian A/B dalam konteks penelitian UX?

Pengujian A/B memungkinkan Anda untuk menguji dua versi dari produk/solusi (versi A dan versi B) dan mengevaluasi mana yang mendapatkan persetujuan lebih besar dari pengguna. Cara untuk mengukurnya termasuk tingkat konversi, waktu yang dihabiskan di situs, atau umpan balik peserta dan kecenderungan mereka untuk merekomendasikan situs/produk. Sebelum pengujian, Anda perlu mendefinisikan dan menentukan apa yang dimaksud dengan “kesuksesan” untuk versi tertentu.

Kapan menerapkan pengujian A/B?

Anda dapat menerapkan pengujian A/B untuk pengujian prototipe, selama fase pengembangan produk, serta untuk membangun strategi pemasaran dan promosi. Mereka adalah alat yang sempurna untuk mengambil keputusan yang dapat mempengaruhi hasil akhir organisasi. Pengujian A/B sangat berguna terutama ketika kita sudah memiliki hipotesis berdasarkan penelitian sebelumnya dan ingin mengonfirmasi bahwa itu adalah solusi yang tepat. Pertanyaan penelitian yang disusun untuk pengujian A/B mungkin terlihat seperti ini:

• Versi mana dari produk yang menghasilkan tingkat konversi lebih tinggi?
• Mana dari dua notifikasi dorong yang berbeda kata-katanya yang meningkatkan keterlibatan dalam aplikasi?

Sebuah pengujian A/B yang baik harus mencakup perbandingan yang sesederhana mungkin, misalnya, alih-alih membandingkan dua versi situs yang sepenuhnya berbeda, lebih baik menguji dua gaya header yang berbeda atau dua lokasi berbeda dari tombol CTA. Dengan perbandingan kecil, kita akan mengenali dengan tepat font, warna, elemen, atau lokasi mana yang paling mempengaruhi UX.

Metode penelitian ini terdiri dari dua jenis pengujian: univariat dan multivariat. Yang pertama berfokus pada perbedaan antara dua varian dari suatu item – misalnya, tombol merah dan tombol biru. Namun, yang multivariat membandingkan lebih dari 2 varian tombol pada saat yang sama – misalnya, merah, biru, hijau, dan putih (selain itu, mereka juga dapat berbeda dalam judul, misalnya “Periksa ini” dan “Lihat lebih banyak”).

Keuntungan utama dari pengujian A/B adalah kecepatan dan biaya rendah. Mereka juga memungkinkan evaluasi beberapa varian produk pada sekelompok orang nyata yang besar. Namun, perlu diingat untuk fokus pada aspek-aspek ini yang dapat memiliki dampak nyata pada persepsi keseluruhan terhadap produk. Jangan membandingkan elemen acak. Buat hipotesis, lakukan penelitian pelengkap lainnya, lalu konsultasikan dengan tim desain dan pengembangan Anda. Bersama-sama, Anda akan menentukan fitur penting mana yang perlu diuji dalam berbagai versi dengan melakukan pengujian A/B satu varian atau multi-varian.

Pengujian A/B tampaknya merupakan bentuk penelitian yang cepat – meskipun itu bukan aturan. Anda mungkin perlu menjalankannya selama beberapa minggu untuk mendapatkan cukup data untuk analisis UX (tetapi Anda juga bisa saja menyelesaikannya dalam beberapa hari atau bahkan beberapa jam). Waktu yang dibutuhkan untuk menjalankan survei tergantung pada banyak faktor.

Bagaimana cara melakukan pengujian A/B?

1. Identifikasi masalah Anda.

Pastikan untuk menerapkan alat analitis yang tepat untuk secara tepat menentukan sifat masalah.

2. Temukan sebanyak mungkin tentang masalah serta pengguna. Kenali mereka dengan baik.

Tentukan dengan tepat lokasi aliran dan coba cari tahu mengapa itu terjadi. Pemahaman yang mendetail akan berkontribusi pada analisis yang tepat dan ketat.

3. Rumuskan hipotesis dengan menjawab bagaimana cara menyelesaikan masalah.

Sebuah hipotesis adalah asumsi yang dapat diuji. Anda dapat merumuskannya dalam bentuk kondisi – “jika X terjadi maka Z”, misalnya, “jika judulnya menggunakan font 22 alih-alih 18, konversi akan meningkat”. Pengujian A/B akan memberi tahu Anda apakah dugaan yang disajikan dalam hipotesis itu benar.

4. Tentukan tujuan Anda.

Tentukan apa yang ingin Anda capai dengan studi serta melalui seluruh proses penelitian dan desain – misalnya, Anda ingin lebih banyak pengguna mengklik tombol CTA di beranda.

5. Tentukan akurasi statistik.

Tentukan angka dan data yang Anda butuhkan untuk evaluasi praktis survei dan untuk pemangku kepentingan bisnis untuk ditunjukkan – misalnya, apakah peningkatan 2% dalam konversi akan memuaskan mereka dan layak untuk diinvestasikan dalam survei?

6. Tentukan skala hasil yang diperlukan.

Jumlah responden berapa yang akan memastikan akurasi statistik? Persentase berapa dari basis pengguna harian, mingguan, atau bulanan yang akan membuat hasil ini berharga dan konklusif? Sangat penting untuk menentukan ini sebelum melanjutkan dengan survei.

7. Buat versi B dan uji hipotesis Anda.

Siapkan varian tambahan (varian B) dari situs/produk/fungsionalitas untuk hipotesis Anda dan mulai pengujian. Pada tahap ini, pengembang masuk untuk menerapkan solusi alternatif kedua untuk produk yang ada – dan pengguna tanpa sadar dibagi menjadi dua kelompok (kelompok A dan kelompok B) situs/aplikasi seperti sebelumnya. Selama penilaian, coba lihat data Anda hanya setelah Anda mengumpulkan cukup data untuk mendapatkan validitas statistik dan hasil yang layak.

8. Analisis dan bertindak berdasarkan hasil pengujian.

Jika versi B Anda memenuhi ambang efektivitas yang ditetapkan dan mereka mengonfirmasi hipotesis Anda, Anda dapat melanjutkan untuk menerapkannya untuk semua pengguna (tidak lagi dibagi antara versi A dan B). Namun, jika hipotesis tersebut terbukti salah, tetaplah dengan versi asli A atau rumuskan dan uji hipotesis baru. Juga, periksa metode penelitian alternatif untuk melengkapi data.

Ringkasan

Pengujian A/B adalah subjek yang cukup teknis. Ini memerlukan pengetahuan tertentu tentang statistik, serta pengetahuan teknis/spesialis yang lebih khusus (atau hubungan yang baik dengan tim pengembangan perusahaan). Ini adalah metode langsung – di atas itu cukup sederhana, cepat, dan murah. Ini memungkinkan perbandingan dua versi alternatif dari produk dengan biaya sedikit dengan hasil yang memuaskan. Lebih dari itu, temuan ini berasal dari pengguna nyata, mereka seakurat yang bisa Anda dapatkan. Namun, ingatlah bahwa Anda tidak dapat menguji setiap fitur, elemen, atau detail kecil di situs – itulah sebabnya, saat melakukan pengujian A/B, adalah standar untuk melakukan metode penelitian pelengkap lainnya.

Baca juga: Metode penelitian penemuan

Jika Anda menyukai konten kami, bergabunglah dengan komunitas sibuk kami di Facebook, Twitter, LinkedIn, Instagram, YouTube, Pinterest, TikTok.