Pertemuan Ke 11 - Matakuliah RPL - Pengujian SUS, TAM dan ISO-9126

Apa itu System Usability Scale (SUS)?

System Usability Scale (SUS) merupakan kuesioner untuk mengukur persepsi kegunaan. Diciptakan oleh John Brooke pada tahun 1986 dan dahulu digunakan untuk menguji sistem elektronik kantor.

SUS memiliki 10 pertanyaan dan 5 pilihan jawaban. Pilihan jawaban terdiri dari sangat tidak setuju sampai sangat setuju. SUS memiliki skor minimal 0 dan skor maksimal 100. SUS dalam bahasa aslinya menggunakan bahasa Inggris. Namun sudah ada penelitian atau sebuah paper yang sudah membuatnya menjadi bahasa Indonesia pada penelitian Z. Sharfina dan H. B. Santoso (2016).

Berikut 10 pertanyaan dari System Usability Scale (SUS) yang sudah diterjemahkan dalam bahasa Indonesia:

Seperti yang sudah dijelaskan diatas tadi bahwa SUS memiliki 5 pilihan jawaban. Mulai dari sangat tidak setuju, tidak setuju, ragu-ragu, setuju, dan sangat setuju. Skor masing-masing jawabana mulai dari 1 sampai 5. Berikut pilihan jawaban beserta skornya.

Aturan Menghitung SUS

Setelah melakukan pengumpulan data dari responden, kemudian data tersebut dihitung. Dalam cara menggunakan System Usability Scale (SUS) ada beberapa aturan dalam perhitungan skor SUS. Berikut ini aturan-aturan saat perhitungan skor pada kuesionernya:

Setiap pertanyaan bernomor ganjil, skor setiap pertanyaan yang didapat dari skor pengguna akan dikurangi 1.

Setiap pertanyaan bernomor genap, skor akhir didapat dari nilai 5 dikurangi skor pertanyaan yang didapat dari pengguna.

Skor SUS didapat dari hasil penjumlahan skor setiap pertanyaan yang kemudian dikali 2,5.

Aturan perhitungan skor untuk berlaku pada 1 responden. Untuk perhitungan selanjutnya, skor SUS dari masing-masing responden dicari skor rata-ratanya dengan menjumlahkan semua skor dan dibagi dengan jumlah responden.

Berikut rumus menghitung skor sus:

Cara Menghitung SUS

Cara menggunakan System Usability Scale (SUS) selanjutnya, Kamu bisa menuliskan data hasil dari responden di excel atau aplikasi lain. Jumlah responden nanti akan kita bahas lain waktu. Contoh rekap datanya seperti pada tabel dibawah ini. Untuk Q1 sampai Q10 merupakan no pertanyaan dan angkanya adalah jawaban dari repsonden.

Contoh Data Asli Dari Responden :

Contoh data asli diatas kemudian kita hitung dengan aturan menghitung SUS yang ada 3. Kemudian jumlahkann hasil skor dari masing-masing responden mulai dari Q1 sampai Q10. Kemudian Jika sudah dapat jumlahnya, jumlah tadi dikali dengan 2,5 untuk mendapatkan nilai akhir. Berikut contoh hasil hitung sementara dari data diatas.

Contoh Data Hasil Hitung SUS :

Jika sudah sampai tahap diatas ini, Kamu tinggal menerapkan rumus yang ada diatas tadi dicari rata-rata dari nilainya. Caranya seperti rumus yaitu, jumlahkan nilai dari semua responden kemudian dibagi jumlah responden. Jika dari hasil data diatas hasil skor rata-rata SUS adalah 85.

Kesimpulan Dari Skor SUS

Kesimpulan dari cara menggunakan System Usability Scale (SUS) adalah setelah dihitung didapatlah

skor rata-rata SUS dari semua responden. Skor tersebut kemudian disesuaikan dengan penilaian SUS. Masuk kategori mana hasil pengujian dengan skor rata-rata yang sudah didapat.

Skor rata-rata SUS dari banyaknya penelitian adalah 68, maka jika nilai SUS di atas 68 akan dianggap di atas rata-rata dan nilai di bawah 68 di bawah rata-rata. Jika skor yang kamu dapat dibawah 68 berarti ada masalah pada usability dan butuh perbaikan. Namun kesimpulan akhir bisa juga ditentukan melalui penilaian seperti pada gambar berikut.

Contohnya dari data diatas yang mendapatkan skor 85, maka skor tersebut masuk dalam kategori EXCELLENT dengan grade scale B. Artinya secara usability berdasarkan data tersebut mendapatkan penilaian dapat diterima atau layak lah.

Cara Mendapatkan Masukan Atas Masalah Usability

Kelemahan dari SUS, kita nggak tau masalah apa yang ada aplikasi kita jika skornya rendah. Jalan satu-satunya untuk mendapatkan masukan untuk meningkatkan skor SUS adalah dengan memawawancarai responden. Caranya bagaimana? Nih Aku kasih tau.

Setiap pertanyaan bernomor ganjil, skor yang diharapkan adalah 5 (Sangat Setuju) dan skor yang tidak diharapkan adalah 1 (Sangat Tidak Setuju)

Setiap pertanyaan bernomor genap, skor yang diharapkan adalah 1 (Sangat Tidak Setuju) dan skor yang tidak diharapkan adalah 5 (Sangat Setuju)

Maka Kamu bisa menanyakan alasan kepada responden kenapa menjawab pada pilihan jawaban yang tidak diharapkan. Cohtohnya seperti pada pertanyaan “No 2. Saya merasa sistem ini rumit untuk digunakan”. Jika Jawabannya besar seperti 3, 4, 5 maka Kamu bisa menanyakan kepada responden apa yang membuat aplikasi yang barusan digunakan rumit. Dari sini Kamu bisa mengetahui masalah sebenarnya.

Jika kita sudah mendapatkan masalah yang sebenarnya, maka perlu ada tindak lanjutnya dengan memperbaiki aplikasi tersebut. Setelah diperbaiki, Kamu bisa mengulang kembali pengujian usability apakah ada peningkatan atau tidak.

PENGERTIAN TAM

Model penerimaan teknologi (Technology Acceptance Model, TAM) adalah salah satu model yang dibangun untuk menganalisis dan memahami faktor?faktor yang mempengaruhi diterimanya penggunaan teknologi komputer.

Modifikasi model TAM dilakukan oleh Venkantesh (2002) dengan menambahkan variable trust dengan judul: Trust enhanced Technology Acceptance Model, yang meneliti tentang hubungan antar variabel TAM dan trust. Modifikasi TAM lain yaitu Trust and Risk in Technology Acceptance Model (TRITAM) yang menggunakan variabel kepercayaan dan resiko bersama variabel TAM (Lui and Jamieson, 2003).

Technology Acceptance Model (TAM) merupakan salah satu model yang dibangun untuk menganalisis dan memahami faktor?faktor yang mempengaruhi diterimanya penggunaan teknologi komputer yang diperkenalkan pertama kali oleh Fred Davis pada tahun 1986. TAM merupakan hasil pengembangan dari Theory of Reasoned Action (TRA), yang lebih dahulu dikembangkan oleh Fishbein dan Ajzen pada 1980.

TUJUAN TAM

TAM bertujuan untuk menjelaskan dan memperkirakan penerimaan (acceptance) pengguna terhadap suatu sistem informasi. TAM menyediakan suatu basis teoritis untuk mengetahui faktor-faktor yang mempengaruhi penerimaan terhadap suatu tekhnologi dalam suatu organisasi. TAM menjelaskan hubungan sebab akibat antara keyakinan (akan manfaat suatu sistem informasi dan kemudahan penggunaannya) dan perilaku, tujuan/keperluan, dan penggunaan aktual dari pengguna/user suatu sistem informasi.

Manfaat Technology Acceptance Model

Manfaat yang dirasa terhadap manfaat teknologi dapat diukur dari beberapa faktor sebagai berikut (Wijaya, 2006):

-
Penggunaan teknologi dapat meningkatkan produktivitas pengguna.

- Penggunaan teknologi dapat meningkatkan kinerja pengguna.

- Penggunaan teknologi dapat meningkatkan efisiensi proses yang dilakukan pengguna.

Faktor Technology Acceptance Model

Faktor penyebab pengalaman sebenarnya berkaitan erat dengan faktor kedua dari TAM yaitu kemudahan yang dirasa dalam menggunakan teknologi. Menurut Wijaya (2006), kemudahan yang dirasa dalam menggunakan teknologi dipengaruhi beberapa faktor, yaitu :

- Faktor pertama berfokus pada teknologi itu sendiri misalnya pengalaman pengguna terhadap penggunana teknologi yang sejenis. Pengalaman baik pengguna akan teknologi sejenis akan mempengaruhi persepsi pengguna terhadap teknologi.

- Faktor kedua adalah reputasi akan teknologi tersebut yang diperoleh oleh pengguna. Reputasi yang baik yang didengar oleh pengguna akan mendorong keyakinan pengguna akan kemudahan penggunaan teknologi tersebut, demikian pula sebaliknya.

- Faktor ketiga yang mempengaruhi persepsi pengguna terhadap kemudahan menggunakan teknologi adalah tersedianya mekanisme support yang handal.

ISO 9126

- Kualitas perangkat lunak dapat dinilai melalui ukuran-ukuran dan metode-metode tertentu, serta melalui pengujian-pengujian software. Salah satu tolak ukur kualitas perangkat lunak adalah ISO 9126, yang dibuat oleh International Organization for Standardization (ISO) dan International Electrotechnical Commission (IEC).

- ISO 9126 adalah standar terhadap kualitas perangkat lunak yang diakui secara internasional. ISO 9126 mendefinisikan kualitas produk perangkat lunak, model, karakteristik mutu, dan metrik terkait yang digunakan untuk mengevaluasi dan menetapkan kualitas sebuah produk software. Selain itu, standar ISO juga harus dipenuhi dari sisi manajemen. Jika manajemennya tidak memenuhi standar ISO maka hasil kerjanya pun tidak dapat diberikan sertifikat standar ISO.

Faktor kualitas menurut ISO 9126 meliputi enam karakteristik kualitas sebagai berikut:

- Functionality (Fungsionalitas). Kemampuan perangkat lunak untuk menyediakan fungsi sesuai kebutuhan user dan memuaskan user.

- Reliability (Kehandalan). Kemampuan perangkat lunak untuk mempertahankan tingkat kinerja tertentu/ performance dari software (ex: akurasi, konsistensi, kesederhanaan, toleransi kesalahan).

- Usability (Kebergunaan). Kemampuan perangkat lunak untuk dipahami, dipelajari, digunakan, dan menarik bagi pengguna.

- Efficiency (Efisiensi). Kemampuan perangkat lunak untuk memberikan kinerja yang sesuai dan relatif terhadap jumlah sumber daya yang digunakan pada saat keadaan tersebut (ex: efisiensi penyimpanan).

- Maintainability (Pemeliharaan). Kemampuan perangkat lunak untuk dimodifikasi. Modifikasi meliputi koreksi, perbaikan atau adaptasi terhadap perubahan lingkungan, persyaratan, dan spesifikasi fungsional (ex: konsistensi).

- Portability (Portabilitas). Kemampuan perangkat lunak untuk ditransfer dari satu lingkungan ke lingkungan lain atau kemampuan software beradaptasi saat digunakan di area tertentu (ex: self documentation, teratur).

1. ISO 9126-Functionality