Analisis Usability pada Aplikasi Mobile Commerce menggunakan
Model PACMAD (Studi Kasus: RedDoorz dan Oyo Rooms)
TUGAS AKHIR
Diajukan Untuk Memenuhi
Persyaratan Guna Meraih Gelar Sarjana Strata 1 Informatika Universitas Muhammadiyah Malang
Adinda Jelfani (201610370311011)
RPL
PROGRAM STUDI INFORMATIKA
FAKULTAS TEKNIK
UNIVERSITAS MUHAMMADIYAH MALANG
2021
i
ii
iii
iv
KATA PENGANTAR
Puji dan Syukur Alhamdulillah Penulis ucapkan kepada Allah SWT yang telah melimpahkan Rahmat, Taufik, serta Hidayah-Nya sehingga Penulis dapat menyelesaikan tugas akhir yang berjudul “Analisis Usability pada Aplikasi Mobile Commerce menggunakan Model PACMAD (Studi Kasus: RedDoorz dan Oyo Rooms)”. Dalam tulisan ini berisikan cara menerapkan pengujian usability model PACMAD pada aplikasi RedDoorz dan Oyo Rooms, mengetahui hasil perbandingan aspek usability model PACMAD pada aplikasi RedDoorz dan Oyo Rooms serta rekomendasi perbaikannya.
Penulis menyadari dalam menyelesaikan tugas akhir ini tidak lepas dari bimbingan dan bantuan segala pihak. Pada kesempatan ini, Penulis mengucapkan terima kasih sebesar-besarnya kepada:
1. Orang tua tercinta Papah, mama yang selalu memberikan doa, nasehat, dan dukungan.
2. Ibu Gita Indah Marthasari, S.T., M.Kom, selaku Dosen Pembimbing 1 sekaligus ketua jurusan program studi teknik informatika, Ibu Evi Dwi Wahyuni, M.Kom selaku Dosen Pembimbing 2 yang selalu bersedia meluangkan waktu dan tenaga untuk memberikan bimbingan, petunjuk, serta saran dalam penyusunan tugas akhir ini.
3. Kak Nafilah UB yang sudah meluangkan waktunya untuk membantu dan memberi petunjuk dalam penyusunan tugas akhir ini.
4. Wila, Nina, Angga, Firdaus, Lidya, Dyah, Erika, Fitriani, Sukma, Arsy yang menjadi sahabat dalam menuntut ilmu selama perkuliahan.
5. Seluruh teman-teman yang tidak bisa disebutkan satu persatu yang memberikan bantuan serta motivasi.
v
Penulis menyadari masih banyak kekurangan dalam isi tugas akhir ini. Untuk itu, penulis sangat mengharapkan kritik dan saran yang membangun agar tulisan ini dapat berguna bagi kita semua untuk perkembangan ilmu pengetahuan.
Malang, 5 Januari 2021
vi ABSTRAK
RedDoorz dan Oyo Rooms merupakan aplikasi m-commerce pemesanan hotel budget yang masuk dalam sepuluh besar kategori Travel and Local di Play Store. Memiliki jumlah pengguna yang banyak, namun kedua aplikasi tersebut memiliki rating jauh berbeda dan memiliki ulasan yang buruk karena tingkat usability yang rendah. Penelitian ini bertujuan untuk melakukan pengujian usability pada aplikasi RedDoorz dan Oyo Rooms menggunakan model PACMAD, kemudian melakukan perbandingan pada aspek usability-nya serta menyusun rekomendasi perbaikan. Pengujian dilakukan menggunakan 5 teknik, yakni wawancara, performance measurement, kuesioner SEQ, kuesioner NASA-TLX, dan teknik RTA. Kedua aplikasi dinilai sudah efektif pada aspek effectiveness dengan nilai 97% pada aplikasi RedDoorz dan 98% aplikasi Oyo Rooms, Kedua aplikasi sudah efisien pada aspek efficiency, Oyo Rooms yang memiliki nilai efficiency yang tertinggi sebesar 98%. Keduanya mudah dipelajari pada aspek learnability namun, RedDoorz memiliki nilai learnability yang lebih tinggi. Keduanya mudah dipahami pada aspek memorability, dan memiliki nilai kesalahan yang wajar dalam penggunaan-nya pada aspek errors dengan nilai 3.16 pada aplikasi RedDoorz dan 3.67 aplikasi Oyo Rooms. Aspek satisfaction aplikasi RedDoorz memiliki nilai kepuasan yang lebih tinggi dibandingkan aplikasi Oyo Rooms, dan pada aspek cognitive load aplikasi RedDoorz dan Oyo Rooms masuk dalam kategori beban kerja mental “Agak Tinggi”. Kesimpulan dari hasil rekomendasi kedua aplikasi, yaitu perbaikan pada beberapa fitur dan perbaikan tampilan halaman agar lebih user friendly.
Kata Kunci: Usability PACMAD, RedDoorz, Oyo Rooms, Performance Measurement, RTA
vii ABSTRACT
RedDoorz and Oyo Rooms are budget hotel booking m-commerce apps that are among the top ten for Travel and Local categories on the Play Store. It has a large number of users, but the two apps rank significantly differently and have poor reviews due to their low usability. This study aims to test the usability of the RedDoorz and Oyo Rooms applications using the PACMAD model, then make comparisons on the usability aspects and prepare recommendations for improvements. Tests were conducted using 5 techniques, interviews, performance measurement, SEQ questionnaire, NASA-TLX questionnaire, and RTA technique. Both applications are effective on the effectiveness aspect with a value of 97% on the RedDoorz application and 98% in the Oyo Rooms application. Both applications are efficient in terms of efficiency, Oyo Rooms which has an efficiency value of up to 98%. Both are easy on the learning aspect however, RedDoorz has a higher learning ability score. Both are easily applied to the memorability aspect, and have a reasonable error value in their use of the error aspect with a score of 3.16 on the RedDoorz app and 3.67 on the Oyo Rooms app. The satisfaction aspect of the RedDoorz application has a higher satisfaction score than the Oyo Rooms application, and on the cognitive aspect of the load the RedDoorz application and Oyo Rooms are included in the mental workload category "Rather High". The conclusion from the results of the recommendations of the two applications, namely improvements to some features and improvements to the appearance of the page to make it easier to implement.
Keywords: Usability PACMAD, RedDoorz, Oyo Rooms, Performance Measurement, RTA
viii DAFTAR ISI
LEMBAR PERSETUJUAN ... i
LEMBAR PENGESAHAN ... ii
LEMBAR PERNYATAAN ... iii
KATA PENGANTAR ... iv
ABSTRAK ... vi
ABSTRACT ... vii
DAFTAR ISI ... viii
DAFTAR GAMBAR ... xi
DAFTAR TABEL ... xii
BAB I ...1 PENDAHULUAN ...1 1.1 Latar Belakang ...1 1.2 Rumusan Masalah ...4 1.3 Tujuan Penelitian ...4 1.4 Batasan Masalah ...5 BAB II ...6 TINJAUAN PUSTAKA ...6
2.1 Kajian Penelitian Terdahulu ...6
2.2 RedDoorz ...7
2.3 Oyo Rooms ...9
2.4 Usability ...11
2.5 Usability Model ...11
2.6 Usability Testing ...18
2.6.1 Metode Usability Testing ...18
BAB III ...20 METODE PENELITIAN ...20 3.1 Identifikasi Masalah ...21 3.1.1 Observasi ...21 3.1.2 Studi Literatur ...21 3.2 Analisa Kebutuhan ...21 3.2.1 Variabel Penelitian ...21
ix
3.3 Populasi dan Sampel Penelitian ...23
3.3.1 Populasi Penelitian ...23
3.3.2 Sampel Penelitian ...23
3.4 Teknik Pengumpulan Data ...23
3.4.1 Wawancara ...24
3.4.2 Teknik Performance Measurement ...24
3.4.3 Kuesioner SEQ (Single Ease Question) ...24
3.4.4 Kuesioner NASA-TLX ...24
3.4.5 Teknik RTA (Retrospective Think Aloud) ...25
3.5 Instrumen Penelitian ...25
3.5.1 Pedoman Wawancara ...25
3.5.2 Task Skenario ...25
3.5.3 Kuesioner SEQ (Single Ease Question) ...28
3.5.4 Kuesioner NASA-TLX ...29
3.6 Analisis Data dan Rekomendasi Perbaikan ...29
3.7 Kesimpulan dan Saran ...30
BAB IV ...31
HASIL DAN PEMBAHASAN ...31
4.1 Metode dan Cara Pengumpulan Data ...31
4.2 Kriteria Responden ...33
4.3 Hasil Uji Aplikasi ...33
4.3.1 Hasil Uji Teknik Performance Measurement ...33
4.3.2 Hasil Uji Kuesioner SEQ (Single Ease Question) ...40
4.3.3 Hasil Uji Kuesioner NASA-TLX ...41
4.3.4 Hasil Uji Teknik RTA (Retrospective Think Aloud) ...43
4.4 Analisis Hasil Penelitian ...46
4.4.1 Analisis Hasil Aspek Effectiveness ...47
4.4.2 Analisis Hasil Aspek Efficiency ...48
4.4.3 Analisis Hasil Aspek Learnability ...49
4.4.4 Analisis Hasil Aspek Memorability ...50
4.4.5 Analisis Hasil Aspek Errors ...52
4.4.6 Analisis Hasil Aspek Satisfaction ...52
4.4.7 Analisis Hasil Aspek Cognitive Load ...53
x
4.5.1 Analisis Perbandingan Aspek Effectiveness ...54
4.5.2 Analisis Perbandingan Aspek Efficiency ...54
4.5.3 Analisis Perbandingan Aspek Learnability ...55
4.5.4 Analisis Perbandingan Aspek Memorability ...56
4.5.5 Analisis Perbandingan Aspek Errors ...56
4.5.6 Analisis Perbandingan Aspek Satisfaction ...57
4.5.7 Analisis Perbandingan Aspek Cognitive Load ...57
4.6 Rekomendasi Perbaikan ...58
BAB V ...60
KESIMPULAN DAN SARAN ...60
5.1 Kesimpulan ...60
5.2 Saran ...61
DAFTAR PUSTAKA ...62
xi
DAFTAR GAMBAR
Gambar 2. 1 Aplikasi RedDoorz ...8
Gambar 2. 2 Aplikasi RedDoorz Lanjutan...9
Gambar 2. 3 Aplikasi Oyo Rooms ...11
Gambar 2. 4 Perbandingan Model Usability ...12
Gambar 2. 5 Faktor dan Atribut Model PACMAD ...13
Gambar 2. 6 Skala Penilaian Kuesioner SEQ ...15
Gambar 2. 7 Skala Kuesioner NASA-TLX ...17
Gambar 3. 1 Diagram Alir Penelitian ...20
Gambar 3. 2 Responden dalam Pengujian ...23
Gambar 4. 1 Hasil uji effectiveness RedDoorz ...47
Gambar 4. 2 Perbandingan hasil uji effectiveness Oyo Rooms...48
Gambar 4. 3 Hasil Uji Learnability RedDoorz ...50
Gambar 4. 4 Hasil Uji Learnability Oyo Rooms ...50
Gambar 4. 5 Hasil Uji Memorability RedDoorz ...51
Gambar 4. 6 Hasil Uji Memorability Oyo Rooms ...52
Gambar 4. 7 Hasil Perbandingan Aspek Effectiveness ...54
Gambar 4. 8 Hasil Perbandingan Aspek Efficiency ...55
Gambar 4. 9 Hasil Perbandingan Aspek Learnability ...56
Gambar 4. 10 Hasil Perbandingan Aspek Errors ...57
xii
DAFTAR TABEL
Tabel 2. 1 Kajian Penelitian Terdahulu ...6
Tabel 2. 2 Indikator Pengukuran Kuesioner NASA-TLX ...15
Tabel 2. 3 Indikator Bobot Kuesioner NASA-TLX ...16
Tabel 2. 4 Lembar Kerja Weighted Workload ...17
Tabel 2. 5 Klasifikasi Skor Beban Kerja Mental NASA-TLX ...18
Tabel 3. 1 Task Skenario Aplikasi RedDoorz ...26
Tabel 3. 2 Task Skenario Aplikasi Oyo Rooms ...27
Tabel 3. 3 Hasil Pengujian Aplikasi ...28
Tabel 3. 4 Contoh Skenario Fungsi Kuesioner SEQ ...29
Tabel 4. 1 Kode Responden ...33
Tabel 4. 2 Kode dan Latar Belakang Responden ...33
Tabel 4. 3 Hasil Pengujian Task Completion ke-1 RedDoorz ...35
Tabel 4. 4 Hasil Pengujian Task Completion ke-2 RedDoorz ...35
Tabel 4. 5 Hasil Pengujian Task Completion ke-1 Oyo Rooms ...35
Tabel 4. 6 Hasil Pengujian Task Completion ke-2 Oyo Rooms ...36
Tabel 4. 7 Hasil Pengujian Time on Task Ke-1 RedDoorz ...37
Tabel 4. 8 Hasil Pengujian Time on Task Ke-2 RedDoorz ...37
Tabel 4. 9 Hasil Pengujian Time on Task Ke-1 Oyo Rooms ...38
Tabel 4. 10 Hasil Pengujian Time on Task Ke-2 Oyo Rooms ...38
Tabel 4. 11 Hasil Pengujian Aspek Errors Pengguna RedDoorz ...39
Tabel 4. 12 Hasil Pengujian Aspek Errors Pengguna Oyo Rooms ...39
Tabel 4. 13 Hasil Pengujian Aspek Satisfaction RedDoorz...40
Tabel 4. 14 Hasil Pengujian Aspek Satisfaction Oyo Rooms ...40
Tabel 4. 15 Hasil Kuesioner NASA-TLX Pengguna RedDoorz ...41
Tabel 4. 16 Hasil Pengkategorian Kuesioner NASA-TLX Pengguna RedDoorz .42 Tabel 4. 17 Hasil Kuesioner NASA-TLX Pengguna Oyo Rooms ...42
Tabel 4. 18 Hasil Pengkategorian Kuesioner NASA-TLX Pengguna Oyo Rooms ...43
Tabel 4. 19 Hasil Pengujian Think Aloud Pengguna Aplikasi RedDoorz ...43
xiii
Tabel 4. 21 Hasil uji Efficiency RedDoorz ...48
Tabel 4. 22 Hasil uji Efficiency Oyo Rooms ...49
Tabel 4. 23 Hasil Uji Errors RedDoorz ...52
Tabel 4. 24 Hasil Uji Errors Oyo Rooms ...52
Tabel 4. 25 Rekomendasi Perbaikan Aplikasi RedDoorz ...58
62
DAFTAR PUSTAKA
[1] I. W. Stats, “Asia Marketing Research, Internet Usage, Population Statistics
and Facebook Subscribers,” www.internetworldstats.com, 2020. [Online]. Available: https://www.internetworldstats.com/asia.htm#id. [Accessed: 12-Jan-2020].
[2] S. Shakti, “IMR 2019: Ini yang Disuka Millennial saat Belanja Online,”
2019. [Online]. Available:
https://www.idntimes.com/tech/trend/bayu/survei-ims-2019-ini-yang-disuka-millennial-saat-belanja-online/5. [Accessed: 13-Jul-2020].
[3] E. Gunawan, G. O. Sebastian, and A. Harianto, “Kepuasan Pelanggan
Menginap di Empat Virtual Hotel Operator di Surabaya,” pp. 145–153, 2019.
[4] D. Setyowati, “Masuk Indonesia, OYO Bersaing dengan Airy, Reddoorz,
hingga ZEN Rooms Artikel ini telah tayang di Katadata.co.id dengan judul ‘Masuk Indonesia, OYO Bersaing dengan Airy, Reddoorz, hingga ZEN Rooms’ , https://katadata.co.id/pingitaria/digital/5e9a55bb349e1,” 2018. [Online]. Available:
https://katadata.co.id/pingitaria/digital/5e9a55bb349e1/masuk-indonesia-oyo-bersaing-dengan-airy-reddoorz-hingga-zen-rooms. [Accessed: 08-Jan-2021].
[5] RedDoorz, “About RedDoorz,” 2020. [Online]. Available:
https://www.reddoorz.com/id-id/about-reddoorz.
[6] OYO, “OYO Indonesia,” 2020. [Online]. Available:
https://www.oyorooms.com/id/. [Accessed: 13-Jul-2020].
[7] N. Fauzi, H. M. Az-Zahra, and A. P. Kharisma, “Analisis Usability
Aplikasi Perangkat Bergerak Jual Beli Online dengan Model People At The Center of Mobile Application Development ( PACMAD ) ( Studi Kasus: Tokopedia , Bukalapak dan Shopee ),” J. Pengemb. Teknol. Inf. dan Ilmu Komput., vol. 3, no. 3, pp. 2552–2557, 2019.
[8] R. Harrison, D. Flood, and D. Duce, “Usability of mobile applications:
63 vol. 1, no. 1, p. 1, 2013.
[9] R. Alturki and V. Gay, “Usability Testing of Fitness Mobile Application :
Methodology and Quantitative Results,” no. November, pp. 97–114, 2017. [10] S. R. Wardhana, D. Purwitasari, and S. Rochimah, “Analisis Sentimen
Pada Review Pengguna Aplikasi Mobile Untuk Evaluasi Faktor Usability,” pp. 128–136.
[11] D. Chisnell, Handbook of Usability Testing How to Plan , Design , and Conduct Effective Tests. .
[12] J. Nielsen, “Usability 101: Introduction to Usability,” 2012. [Online]. Available: https://www.nngroup.com/articles/usability-101-introduction-to-usability.
[13] A. Saleh, R. Bintiisamil, and N. B. Fabil, “Extension of pacmad model for usability evaluation metrics using goal question metrics (Gqm) approach,” J. Theor. Appl. Inf. Technol., vol. 79, no. 1, pp. 90–100, 2015.
[14] R. Rizawanti, A. Ketut, Resika, and S. P, Wayan, Arta, “Usability Testing Pada Aplikasi Hooki Arisan dengan Model PACMAD menggunakan Pendeketan GQM,” vol. 8, pp. 33–42, 2019.
[15] J. Sauro, “10 THINGS TO KNOW ABOUT THE SINGLE EASE QUESTION (SEQ),” 2012. [Online]. Available:
https://measuringu.com/seq10/. [Accessed: 02-Mar-2020].
[16] S. G. Hart and L. E. Sta, “HUMAN MENTAL WORKLOAD P.A. Hancock and N. Meshkati (Editors) Elsevier Science Publishers,” 1988. [17] J. Nielsen, “How Many Test Users in a Usability Study?,” 2012. [Online].
Available:
https://www.nngroup.com/articles/how-many-test-users/#:~:text=If you want a single,using many more test participants. [Accessed: 04-Sep-2020].
[18] R. Macefield, “How To Specify the Participant Group Size for Usability Studies : A P ractitioner ’ s Guide,” vol. 5, no. 1, pp. 34–45, 2009. [19] R. Prabawati, “Hubungan Beban Kerja Mental dengan Stres Kerja pada
