A Computer Scientist

JENIS-JENIS EVALUASI

Jenis evaluasi dibedakan menjadi 2 yaitu :

Summative evaluation. Evaluasi yang dilakukan untuk menguji kesuksesan suatu produk yang sudah selesai yaitu mencapai standar yang ditentukan sebelumnya (ISO).
Formative evaluation. Evaluasi yang dilakukan selama desain untuk memastikan produk sesuai dengan yang diinginkan pengguna.

Tempat untuk melakukan evaluasi dilakukan di laboratorium dan di lapangan/ lokasi kerja pengguna sistem. Waktu evaluasi dilakukan ketika muncul produk baru atau perbaikan dari produk sebelumnya.

Mengevaluasi Perancangan

Evaluasi ini terjadi setelah proses perancangan. Secara ideal, evaluasi pertama dilakukan sebelum implementasi dimulai. Jika perancangan dievaluasi, kesalahan dapat dihindari karena perancangan dapat diperbaiki sebelumnya.

Cognitive Walkthrough

Tujuan evaluasi ini untuk melihat seberapa besar dukungan yang diberikan pada pengguna untuk mempelajari beberapa tugas yang diberikan. Pendekatan ini dikemukakan oleh Polson, dkk. Walkthrough dilaksanakan oleh perancang atau seorang ahli dalam psikologi kognitif. Ahli bekerja melalui perancangan tugas tertentu, tahap demi tahap, mengidentifikasi masalah yang berpotensi pada kriteria psikologi. Kemudian dibandingkan ke proses dimana perancang software bekerja dengan koding pada kondisi yang berbeda.
Dalam pendekatan ini ada beberapa issue yang timbul yaitu :

Pengaruh apa yang timbul setelah tugas ini diberikan ke pengguna?
Proses cognitive apa yang tersedia?
Masalah pembelajaran apa yang seharusnya timbul?

Analisis difokuskan pada tujuan user dan pengetahuan. Untuk melakukan evaluasi cognitive walkthrough membutuhkan informasi sebagai berikut :

Deskripsi dari suatu interface yang dibutuhkan itu sendiri
Deskripsi dari tugas termasuk usaha yang benar untuk melakukannya dan struktur tujuan untuk mendukungnya.

Dengan informasi yang sudah didapatkan maka evaluator dapat melakukan langkah dari walkthrough yaitu :

Pilih tugas
Deskripsikan tujuan awal dari user
Lakukan kegiatan/aksi yang tepat
Analisa proses keputusan untuk setiap kegiatan

Cognitive walkthrough berbasis formulir yang disediakan untuk merujuk evaluator melalui sekumpulan pertanyaan yang berhubungan dengan tugas dan tujuan user.

Heuristic Evaluation

Dikemukan oleh Neilsen dan Molich, hampir sama dengan cognitive walkthrough tetapi sedikit terarah dan terstruktur. Pada evaluasi ini, sekumpulan kriteria usability atau heuristic diidentifikasi dan perancangan dilaksanakan. Dalam sistem ini terdapat beberapa kriteria yaitu :

Perilaku sistem dapat dipastikan
Perilaku sistem konsisten
Feedback tersedia
Kemampuan memori user tidak melebihi batas
Dialog merupakan orientasi tugas

Tujuan heuristic evaluation adalah untuk memperbaiki rancangan secara efektif. Evaluator melakukan evaluasi melalui kinerja dari serangkaian tugas dengan perancangan dan disesuaikan dengan kriteria setiap tingkatan. Jika kesalahan terdeteksi dapat ditinjau ulang untuk diperbaiki sebelum tahap implementasi. Pendekatan ini tidak seluruhnya subyektif dengan menggunakan kriteria khusus untuk merujuk evaluasi. Selain itu membutuhkan level pengetahuan tertentu untuk mengaplikasikan evaluasi ini. Misalnya untuk menentukan jika suatu perancangan melebihi memori user, perancang perlu mengetahui kemampuan memori manusia.

Review Based Evaluation

Evaluasi antara psikologi eksperimen dengan interaksi manusia dan komputer menghasilkan hasil-hasil eksperimen yang baik dan pengalaman yang nyata. Misalnya pada usability dari tipe menu yang berbeda, pemanggilan nama perintah dan pemilihan icon. Dalam kenyataannya, hasil eksperimen ini tidak dapat dipastikan mempertahankan keadaan yang tetap. Evaluator harus memilih data secara hati-hati, menunjuk rancangan eksperimen yang dipilih, subyek masyarakat yang digunakan, analisa pelaksanaan dan asumsi yang dibuat. Misalnya: pengujian eksperimen, usability dari jenis sistem ‘bantu’ umum yang menggunakan subyek baru tidak menyediakan evaluasi yang tepat dari sistem ‘bantu’ yang dirancang bagi user ahli.

Model Based Evaluation

Pendekatan evaluasi ini berguna untuk mengevaluasi perancangan dengan kombinasi spesifikasi perancangan dan evaluasi ke dalam kerangka kerja yang sama. Contohnya: GOMS Model, Keystroke level model dan design rationale.

Berikut adalah beberapa link yang bisa digunakan sebagai sumber terkait evaluasi web usability. Evaluasi web usability ini bisa digunakan untuk berbagai website seperti e-commerce website, digital library, dan jenis website lainnya.

http://webml.elet.polimi.it/webml/upload/ent5/1/WebUsability-MateraEtAl.pdf (ini adalah link artikel mengenai prinsip dan metode evaluasi web usability

http://www.useit.com/ (ini merupakan website milik usability guru, jacob nielsen yang sangat direkomendasikan untuk memberikan panduan lengkap mengenai evaluasi web usability. Banyak artikel-artikel menarik yang bisa diakses melalui http://www.useit.com/alertbox/ yang terkait dengan web usability)

http://designingwebinterfaces.com/6-tips-for-a-great-flex-ux-part-5 (10 heuristic evaluation disertai dengan contoh yang mudah dimengerti)

http://www.usefulusability.com/24-usability-testing-tools/ (berisi artikel mengenai 24 usability testing tools yang ditulis oleh seorang usability expert)

http://faculty.washington.edu/jtenenbg/courses/360/f04/sessions/schneidermanGoldenRules.html

(8 golden rules of interface design)