Evaluasi dalam Interaksi Manusia dan Komputer

 

Mata kuliah: Interaksi Manusia dan Komputer (IMK)

Evaluasi

• Evaluasi merupakan suatu proses menjelaskan, memperoleh dan menyediakan data yang berguna 

untuk menilai alternative keputusan. Baik pengukuran maupun penilaian sangat esensial bagi 

pengambilan keputusan.

• Evaluasi adalah suatu tes atas tingkat penggunaan dan fungsionalitas system yang dilakukan di 

dalam laboratorium, di lapangan, atau di dalam kolaborasi dengan pengguna.

• Yang dievaluasi pada interaksi manusia dan komputer adalah desain dan implementasinya.

Pengenalan Evaluasi Empiris

    Evaluasi empiris adalah proses penilaian dengan cara eksperimen, penelitian, atau observasi. Sedangkan data empiris merupakan data yang ditemukan atau disimpulkan dari sebuah eksperimenatau penelitian.

Perancangan Eksperimen

    Suatu perancangan eksperiment tidak lepas dari rancangan percobaan (dengan setiap langkah 

tindakan yang betul-betul terdefinisikan) sedemikian rupa sehingga informasi yang berhubungan 

dengan/atau diperlukan untuk persoalan yang sedang diteliti dapat dikumpulkan. 

    Selain itu desain eksperimen didefinisikan sebagai suatu pengujian atau serangkaian pengujian 

yang bertujuan untuk melakukan perubahan terhadap variabel-variabel input dari proses atau sistem 

sehingga dapat meneliti dan mengidentifikasi sebab perubahan dari output.

Hipotesa, apa yang ingin ditunjukkan.

• Merupakan prediksi yang dihasilkan dalam eksperimen.

• Hipotesa ini menggunakan variabel independen dan dependen, dimana variasi dalam variabel 

independen akan menyebabkan perbedaan pada variabel dependen.

• Tujuan eksperimen adalah untuk menyangkal keberadaan null hypothesis yang menyatakan tidak 

ada perbedaan dalam variabel dependen diantara tingkatan dari variabel independen.

• Pengukuran statistika menunjukkan bahwa nilai hasil dapat dibandingkan dengan tingkat 

kepercayaan. Jika nilai tertentu ada pada tingkat kepercayaan, hipotesa null tidak ada.

Variabel

Variabel adalah sesuatu yang dapat diukur dan dimodifikasi.

• Variabel independen, eksperimen untuk menghasilkan kondisi yang berbeda seperti: jenis 

interface, level dari help, jumlah item menu dan perancangan ikon.

• Variabel dependen, variabel yang dapat diukur dalam eksperimen seperti: waktu untuk 

menyelesaikan tugas, jumlah kesalahan yang dibuat dan kualitas dari unjuk kerja user.

Paradigma Evaluasi

• “Quick and dirty” evaluation

• Usability testing

• Field studies

• Predictive evaluation

Partisipasi

    Merupakan keikutsertaan, peranserta tau keterlibatan yang berkitan dengan keadaaan 

lahiriahnya,berarti Partisipasi dalam evaluasi keikutsertaan dalam melakukan proses penilaian

Bentuk partisipasi atau contohnya antara lain:

• Partisipasi harta benda adalah partisipasi dalam bentuk menyumbang harta benda, biasanya 

berupa alat-alat kerja atau perkakas 

• Partisipasi tenaga adalah partisipasi yang diberikan dalam bentuk tenaga untuk pelaksanaan 

usaha-usaha yang dapat menunjang keberhasilan suatu penilaian

• Partisipasi keterampilan, yaitu memberikan dorongan melalui keterampilan yang dimilikinya 

kepada anggota masyarakat lain yang membutuhkannya

IRB (Institutional Review Board) 

    Merupakan sebuah kelembagaan dewan peninjau ( IRB ), juga dikenal sebagai komite etika 

independen atau dewan peninjau etik , adalah panitia yang telah ditunjuk secara resmi untuk 

menyetujui, memantau, dan meninjau biomedis dan perilaku penelitian yang melibatkan manusia . 

    Mereka sering melakukan beberapa bentuk analisis risiko dan manfaat dalam upaya untuk menentukan 

benar atau tidak penelitian harus dilakukan. Nomor satu prioritas IRB adalah untuk melindungi subyek 

manusia dari bahaya fisik atau psikologis.

Etika 

Etika evaluasi terdiri dari 4 hal, yaitu:

a. Kerahasiaan hasil evaluasi

b. Keamanan evaluasi

c. Intepretasi hasil evaluasi

d. Penggunaan evaluasi

Teknik pengumpulan data

    Dalam penelitian, teknik pengumpulan data merupakan faktor penting demi keberhasilan 

penelitian. Hal ini berkaitan dengan bagaimana cara mengumpulkan data, siapa sumbernya, dan apa 

alat yang digunakan.

• Metode observasi merupakan metode pengumpul data yang dilakukan dengan cara mengamati 

dan mencatat secara sistematik gejala-gejala yang diselidiki.

• Metode kuesioner merupakan suatu teknik pengumpulan data secara tidak langsung (peneliti 

tidak langsung bertanya jawab dengan responden). Instrumen atau alat pengumpulan datanya 

juga disebut angket berisi sejumlah pertanyaan-pertanyaan yang harus dijawab atau direspon 

oleh responden. Responden mempunyai kebebasan untuk memberikan jawaban atau respon 

sesuai dengan persepsinya.

• Metode Triangulasi merupakan cara pemeriksaan keabsahan data yang paling umum digunakan. 

Cara ini dilakukan dengan memanfaatkan sesuatu yang lain diluar data untuk pengecekan atau 

sebagai pembanding terhadap data itu.

• Metode teknik Studi dokumen merupakan pelengkap dari penggunaan metode obsevasi dan 

wawancara dalam penelitian kualitatif. Bahkan kredibilitas hasil penelitian kualitatif ini akan 

semakin tinggi jika melibatkan / menggunakan studi dokumen ini dalam metode penelitian 

kualitatifnya

• Metode wawancara adalah proses tanya jawab dalam penelitian yang berlangsung secara lisan 

dalam mana dua orang atau lebih bertatap muka mendengarkan secara langsung informasiinformasi atau keterangan-keterangan.

Analisa Data dan Interpretasi Hasil

Analisis data adalah proses Penyederhanaan data ke dalam bentuk yang le bih mudah dibaca dan 

diinterpretasikan. Analisis dan interpretasi data diper lukan untuk merangkumkan apa yang telah 

diperoleh, menilai apakah data

tersebut berbasis kenyataan, teliti, dan benar. Analisis dan interpretasi da ta juga diperlukan untuk 

memberi jawaban terhadap pertanyaan-pertanyaan

yang diajukan.

Jenis Data

• Data Kuantitatif

Data kuantitatif merupakan data yang berupa angka atau bilangan, baik yang diperoleh dari hasil 

pengukuran maupun diperoleh dengan cara mengubah data kualitatif menjadi data kuantitatif.

• Data Kualitatif

Data kualitatif merupakan data yang berupa kalimat-kalimat, atau data yang dikategorikan 

berdasarkan kualitas objek yang diteliti.

Teknik Analisis Data

Analisis interaktif terdiri dari tiga tiga komponen, yakni:

• Memilih data (reduksi data) Pada langkah pemilihan data ini, pilihlah data yang relevan dengan 

tujuan perbaikan pembelajaran. Data yang tidak relevan dapat dibuang, dan jika di anggap perlu, 

guru peserta dapat menambahkan data baru dengan mengingat kembali peristiwa atau fenomena 

yang ter jadi selama pelaksanaan rencana tindakan.

• Endeskripsikan data hasil temuan (memaparkan data) Pada kegiatan ini, guru peserta membuat 

deskripsi dari langkah yang yang dilakukan pada kegiatan tersebut.

• Menarik kesimpulan hasil deskripsi Berdasarkan deskripsi yang telah dibuat pada langkah

tersebut, selajutnya dapat di tarik kesimpulan hasil pelaksanaan rencana tindakan yang te lah 

dilakukan.

Penggunaan hasil rancangan

Kesimpulan

    Evaluasi merupakan bagian dari sistem manajemen yaitu perencanaan, orga nisasi, pelaksanaan, 

monitoring. Tanpa evaluasi, maka tidak akan diketahui bagaimana kondisi objek evaluasi tersebut dalam 

rancangan, pelaksanaan serta hasilnya.

    Tujuan evaluasi adalah Melihat seberapa jauh sistem berfungsi ,Menge tahui efek suatu interface 

ke pengguna, dan Mengidentifikasi problem yang terjadi pada system.

    Perancangan Eksperimen akan membuat sebuah prediksi. partisipasi, IRB dan Etika adalah 

bagaimana pekerjaanya.