Apa itu Pengujian A/B, A/B Testing.Pengujian A/B bertujuan untuk membandingkan performa dua item atau variasi satu sama lain. Dalam manajemen produk, pengujian A/B sering digunakan untuk mengidentifikasi opsi dengan performa terbaik. Misalnya, dua variasi antarmuka pengguna baru dapat diuji, dan, dalam hal ini, variasi yang menerima interaksi pengguna paling banyak akan memenangkan pengujian A/B.
Pengujian A/B digunakan untuk menentukan versi atau varian mana dari sesuatu yang akan bekerja lebih efektif di pasar. Strategi ini umumnya digunakan oleh para profesional pemasaran dan periklanan, yang menampilkan beberapa versi iklan, email pemasaran, atau halaman web kepada pengguna yang dipilih secara acak, lalu menganalisis hasilnya. Manajer produk juga dapat menggunakan pengujian A/B untuk mengembangkan produk yang akan beresonansi dengan pengguna.
Ada banyak manfaat menggunakan pengujian A/B, termasuk:
- Pemasar (atau manajer produk) dapat berfokus pada elemen yang sangat spesifik untuk diuji
- Hasilnya langsung dan mudah dianalisis
- Tidak seperti survei, di mana jawaban pengguna bersifat teoretis, pengujian A/B mengukur keterlibatan nyata dengan aset
Mengapa pengujian A/B penting? Dengan pengujian A/B (disebut juga pengujian terpisah atau pengujian terpisah A/B), tim dapat membuat perbandingan apel-ke-apel yang sebenarnya dari satu varian aset, untuk memastikan hasilnya mencerminkan bagaimana pengguna sebenarnya merespons varian tersebut secara spesifik.
Misalnya, dengan mengirimkan dua email penjualan yang sama sekali berbeda, tim pemasaran dapat mempelajari pesan mana yang berkinerja lebih baik. Tetapi tim itu belum tentu tahu elemen spesifik mana dari email pemenang yang beresonansi dengan pembaca. Dengan pengujian A/B, tim tersebut dapat mengirimkan dua versi email yang hampir sama hanya dengan mengubah satu elemen — baris subjek, ajakan bertindak, dll. — dan mempelajari elemen mana yang menurut pengguna lebih menarik.
Jika tim terus menggunakan pengujian A/B untuk mengukur keefektifan setiap elemen, lama kelamaan tim tersebut akan dapat membangun aset (iklan, produk, situs web) yang sesuai dengan persona pengguna perusahaan.
Mengapa Manajer Produk harus menggunakan Pengujian? Meskipun secara historis terutama merupakan alat pemasaran dan periklanan, pengujian A/B juga dapat membantu manajer produk membangun produk yang lebih baik.
Dengan pengujian A/B, manajer produk dapat bereksperimen dengan merilis beberapa versi fitur baru, tata letak, atau elemen produk lain ke segmen basis pengguna yang dipilih secara acak — dan mempelajari versi mana yang paling ditanggapi pengguna.
Bagaimana Anda menjalankan pengujian A/B? Ada banyak cara bagi manajer produk untuk melakukan pengujian A/B. Salah satu contoh yang berguna adalah pendekatan yang ditawarkan oleh Product School, di mana pengujian A/B mengikuti proses lima tahap:
Tahap 1: Tentukan data yang dapat Anda tangkap. Pertama, tentukan jenis informasi yang dapat Anda kumpulkan dan analisis, sebelum membuat eksperimen dan menjalankan pengujian. Jika Anda melewati langkah ini, Anda mungkin membuang waktu dan sumber daya untuk mengembangkan eksperimen yang hasilnya tidak dapat diukur secara akurat.
Tahap 2: Kembangkan hipotesis Anda. Berdasarkan data yang Anda tahu akan tersedia untuk tim Anda, Anda sekarang ingin mengidentifikasi peluang untuk eksperimen Anda dan merumuskan teori tentang bagaimana pengguna akan bereaksi terhadap elemen tertentu dari produk Anda.
Misalnya, Anda mungkin berasumsi bahwa pengguna ingin agar langkah-langkah yang diperlukan untuk menyelesaikan tugas menggunakan fitur baru Anda diurutkan dalam urutan tertentu. Itu hipotesis Anda.
Tahap 3: Buat eksperimen Anda. Sekarang Anda ingin mengembangkan detail pengujian Anda. Ini akan membuat tim Anda membuat varian dari fitur yang Anda rencanakan — menggunakan, misalnya, fungsi yang sama tetapi dengan urutan langkah yang berbeda.
Selama tahap ini, Anda juga perlu membuat berbagai segmen basis pengguna yang akan menerima varian fitur baru Anda. Anda juga ingin menentukan metrik yang akan Anda ukur. Apakah Anda akan mengukur preferensi pengguna dari satu varian berdasarkan survei setelah pengguna memiliki kesempatan untuk berinteraksi dengan produk? Atau apakah Anda akan mendasarkannya pada pemantauan data penggunaan dan, jika demikian, bagaimana Anda akan menentukan metode pilihan pengguna?
Tahap 4: Jalankan pengujian Anda. Sekarang saatnya mengirimkan versi berbeda dari fitur baru Anda ke berbagai segmen pengguna dan menunggu untuk melihat bagaimana grup merespons setiap versi.
Tim Anda perlu menentukan sendiri berapa lama untuk menjalankan pengujian A/B, berapa banyak data yang dikumpulkan, dll. — karena ini akan bervariasi untuk setiap perusahaan dan karena Anda ingin mengumpulkan dan menganalisis cukup data yang Anda ketahui bekerja dengan sampel perwakilan yang signifikan secara statistik dari basis pengguna Anda.
Tahap 5: Ukur hasil Anda. Terakhir, Anda akan meninjau data yang telah Anda kumpulkan dari pengujian A/B dan menentukan mana dari dua fitur (atau tata letak, atau skema warna, atau apa pun yang Anda uji) yang mendapatkan respons paling positif atau terbesar tingkat keterlibatan dari pengguna Anda.
Jika Anda memiliki waktu dan sumber daya untuk melanjutkan, Anda juga ingin mengulangi proses ini untuk elemen lain dari produk Anda. Saat Anda menjalankan pengujian A/B secara teratur, Anda dapat mengukur teori tim Anda sendiri dengan data dunia nyata, dan mengembangkan produk yang lebih baik.