Remote Electronic Health Record Concept Testing with Webcam-Based Eye Tracking and Heatmap Algorithms
ADIKA CAFAIZI P, Dr. Mardhani Riasetiawan, SE Ak, MT
2023 | Skripsi | S1 ILMU KOMPUTERPengujian konsep (concept testing) merupakah sebuah praktik untuk memasukkan prinsip-prinsip desain suatu produk, terutama untuk menilai kekokohan ide. Objek yang diuji harus inklusif, termasuk Electronic Health Record (EHR). Literatur sebelumnya telah menunjukkan bahwa tanpa keterlibatan pengguna dalam tahap pengembangan atau bahkan tanpa pengujian sebelum operasi EHR setiap hari untuk tenaga kesehatan, efek buruk dari kelelahan (burnouts) pada dokter, risiko keselamatan pasien, dan peningkatan kematian telah diidentifikasi. Pengujian konsep pada objek yang diminati ini perlu dilakukan, karena dapat mengurangi risiko tersebut. Tes pengujian konsep sendiri terdiri dari dua pendekatan (1) kuantitatif dan (2) kualitatif. Kedua pendekatan ini melibatkan System Usability Scale (SUS), pendekatan pelacakan mata (eye tracking), Metode Think-Aloud, dan heatmaps berdasarkan data pelacakan mata. Pengujian konsep menggunakan pelacak mata library JavaScript, yang disebut WebGazer.js, yang berbasis webcam. Tujuannya di sini adalah untuk mencapai skor SUS "rata-rata", yaitu enam puluh delapan. Ada 8 tenaga kesehatan yang bergabung sebagai partisipan dalam pengujian konsep jarak jauh ini: menilai tata letak dan memberikan pendapat profesional dan pribadi mereka. Saat pengujian dan SUS dilakukan, disimpulkan bahwa ada beberapa fitur di EHR yang diuji tidak berfungsi sebagaimana mestinya. Ini mendorong untuk mendesain ulang tata letak fitur-fitur tersebut. Bukan hanya deskripsi mereka, heatmaps juga mendukung analisis masalah apa yang dialami para partisipan. Karya kolaboratif data kualitatif dan kuantitatif ini memperkuat gagasan desain ulang berbasis data. Ilmu yang diterima juga mendukung terciptanya persona yang berguna untuk memahami kebutuhan calon pengguna. Pada akhirnya, skor SUS rata-rata untuk komponen yang diuji adalah 81,5625 atau dapat dikatakan "sangat baik".
Concept testing is a practice to include the design principles of a product, especially to assess the soundness of the idea. The objects that are being tested should be inclusive, including electronic health records. Previous literature have shown that without any involvement of users in the development stage or even without testing before the EHR operation on a daily basis for healthcare professionals, adverse effects of burnouts to the physicians, patient safety is at risk, and increased mortality have been identified. Concept testing in this object of interest should be conducted, as it might reduce those risks. The concept testing test alone consists of two approaches (1) quantitative and (2) qualitative. These two approaches involve the System Usability Scale (SUS), eye tracking approach, the Think-Aloud Method, and heatmap based on the eye tracking data. The concept testing uses an eye tracker via a library in JavaScript, called WebGazer.js, which is webcam-based. The aim here is to achieve the "average" SUS score, which is sixty-eight. There were 8 healthcare professionals joined as participants in this remote concept testing: assessing the layouts and giving their professional and personal opinion. As the testing and the SUS was conducted, it was concluded that there are some features in the tested EHR that do not work as intended. This pushes for a redesign of the layout. Not just their descriptions, but the heatmap also supports the analysis of what problems are the participants having. These collaborative works of qualitative and quantitative data solidify the idea of a data-driven redesign. The knowledge received also supports the creation of personas, which is useful to understand the needs of potential users. In the end, the average SUS score for the tested component is 81.5625 or can be perceived as "excellent".
Kata Kunci : electronic health record, concept testing, WebGazer.js, system usability scale, personas
