it-swarm.asia

UX di alam vs UX diamati

Baru-baru ini saya cukup beruntung untuk duduk tepat di sebelah pengguna di kereta yang kebetulan menggunakan salah satu aplikasi yang saya desain. Tanpa mengungkapkan ini kepada mereka, saya berhasil mengamati bagaimana mereka menggunakan aplikasi. Meskipun mereka tidak berpikir keras seperti pada sesi pengujian pengguna, sangat wawasan untuk melihat bagaimana mereka menggunakannya.

Yang menjadi pertanyaan, dibandingkan dengan membawa pengguna untuk sesi 'pengujian pengguna', apakah perilaku mereka akan berbeda ketika pengguna tahu mereka sedang diamati? Atau bahkan lebih buruk, ketika insentif diberikan. Jika demikian, apakah itu akan membuat penelitian ini cacat?

59
Ameen Akbar

Ya, ini dikenal sebagai Efek Hawthorne dan itu adalah salah satu dari banyak bias kognitif yang harus diperhatikan ketika menjalankan sesi pengujian kegunaan.

Dari Wikipedia

Efek Hawthorne (juga disebut sebagai efek pengamat) adalah jenis reaktivitas di mana individu memodifikasi aspek perilaku mereka dalam menanggapi kesadaran mereka untuk diamati.

Apakah itu membuat penelitian itu cacat? Ya, dengan cara tertentu. Tapi itu tidak berarti itu tidak layak dilakukan. Anda dapat meredakannya sampai batas tertentu - membuat fasilitas pengujian sealami dan senyaman mungkin, tidak berdiri di sana dengan jas lab dengan clipboard, umumnya ramah dan manusiawi dan tidak seperti mesin. Dan (yang penting) memberi tahu pengguna di muka bahwa bukan mereka yang Anda uji, melainkan sistemnya.

Tetapi bias akan selalu ada di sana, Anda harus menyadarinya, coba pengujian dengan berbagai metode dan pengguna dan jangan berasumsi setelah pengujian bahwa bagaimana orang berperilaku selama pengujian persis bagaimana mereka akan berperilaku di 'dunia nyata' .

Tetapi Anda masih mendapatkan data uji yang berguna dari orang-orang, bahkan jika mereka tahu mereka sedang dipantau. Orang-orang akan berusaha lebih keras untuk menyelesaikan masalah di laboratorium daripada di rumah, jadi jika mereka tidak tahu cara mendapatkan checkout di toko eCommerce Anda saat Anda mengujinya di lab maka Anda sungguh tahu Anda punya masalah - karena orang-orang di rumah pasti sudah lama menalangi.

70
JonW

Sebagai jawaban dari JonW menyatakan ada Efek Hawthorne.

Tetapi ada beberapa perilaku yang mungkin bisa Anda lihat di lingkungan alami jika Anda mengambil pendekatan penelitian etnografi daripada yang mengujinya.

Pengujian pengguna lebih umum dilakukan dalam lingkungan buatan yang dibuat oleh penguji pengguna, beberapa dengan tingkat rasa alami yang berbeda-beda bagi pengguna. Penelitian etnografi dilakukan murni di lapangan, di lingkungan pengguna sendiri. Mungkin menimbulkan beberapa masalah lain yang mungkin tidak teruji oleh pengujian pengguna.

Sebagai contoh jika Anda mengamati seseorang di meja mereka, apakah mereka memiliki post-sekitar dengan kata sandi, panduan dll tentang cara melakukan sesuatu, ini merupakan indikasi bahwa UX perlu perbaikan untuk mempermudah. Pengujian pengguna mungkin tidak memahami hal itu. Jadi saat Anda mengamati pengguna menggunakan aplikasi Anda di kereta, itu mungkin telah menyajikan beberapa hal lain yang tidak akan terjadi di laboratorium.

Saya tidak akan mengatakan itu cacat, saya akan mengatakannya memberikan perspektif yang berbeda dan beberapa hasil alternatif dan pengamatan bahwa pengujian pengguna dalam lingkungan lab mungkin tidak menyoroti dan sebaliknya.

5
UIO

Seperti jawaban lain tunjukkan, ada nama untuk fenomena ini, dan itu cacat.

Tetapi bahkan mengamati pengguna tanpa mereka sadari juga cacat, hanya karena Anda tidak tahu apa yang mereka pikirkan. Mereka mungkin membenci fitur tertentu tetapi bertahan karena mereka tidak punya pilihan.

Pengujian/pengamatan paling sempurna yang bisa Anda dapatkan adalah dengan menggunakan perangkat lunak Anda sendiri. Maksud saya bukan hanya menggunakannya sebagai bagian dari pekerjaan Anda menguji perangkat lunak tetapi benar-benar memiliki kebutuhan untuk menggunakan perangkat lunak seperti itu seperti audiens yang Anda inginkan.

Sebenarnya itulah berapa banyak produk perangkat lunak profil tinggi yang dibuat, mis. Basecamp - mereka mungkin menggunakan Basecamp untuk mengelola pengembangan Basecamp. Gmail - orang-orang di Google mungkin menggunakan Gmail untuk berkomunikasi satu sama lain. React - orang-orang di Facebook mungkin menggunakan React untuk membuat situs web mereka.

Di sisi lain, film Netflix akan memiliki gangguan acak jika Anda mencoba menontonnya dengan teks tertutup di Chrome. Itu mungkin karena tidak ada seorang pun di Netflix yang pernah menggunakan Chrome untuk menonton film Netflix dengan teks tertutup.

1
Andy