Journals / Ahi Evran Üniversitesi Kırşehir Eğitim Fakültesi Dergisi / 2011 / Cilt: 12 - Sayı: 2

Evaluating the Usability of a Departmental Web Site by Authentic Tasks and Eye Tracking Method

BİR BÖLÜM WEB SİTESİNİN OTANTİK GÖREVLER VE GÖZ İZLEME YÖNTEMİ ARACILIĞIYLA KULLANILABİLİRLİK DEĞERLENDİRMESİ

Pages
147–173
Publication Date
2011-05-01
DOI
—
🏛️Bibliographic metadata and full text access for this article are provided via DergiPark.
DergiPark Record ↗
✨

AI Summary & Key Takeaways

AI Insight
⚡ TL;DR(Too Long; Didn't Read)

Usability problems were determined and solutions to these problems were suggested

📌 3 Key Takeaways

🎯
Objective & Hypothesis:The purpose of this study is to evaluate the usability of a university departmental web site as an educational interface by using different usability methods, and to determine usability problems of it to suggest solutions to these problems.
📊
Key Findings & Data:The study group was consisted of 9 participants including 4 undergraduate students and 5 academicians, 4 of whom were research assistants/graduate students, and one of whom was an instructor.
💡
Conclusion & Impact:Usability problems were determined and solutions to these problems were suggested
🔬Design:Research Article
📍Scope:Comprehensive Sample
⚙️Variables:Usability · Eye Tracking Method · Web Site Evaluation

Abstract

The purpose of this study is to evaluate the usability of a university departmental web site as an educational interface by using different usability methods, and to determine usability problems of it to suggest solutions to these problems. The study group was consisted of 9 participants including 4 undergraduate students and 5 academicians, 4 of whom were research assistants/graduate students, and one of whom was an instructor. Study was designed by recording the process of authentic task performance of authentic users and tracking eye movements of two participants in the department web site. Method triangulation method was used for validity of the study and investigator triangulation method was used for reliability of the study. In the data analysis, users’ recordings from the task performances and eye movements were analyzed and the issues for which users had difficulties with, the issues which users hesitated with while performing, the time spent on each task, repeated tasks, successful tasks and unsuccessful tasks were discovered comparatively with the observer notes. Usability problems were determined and solutions to these problems were suggested

Özet

Bu çalışmanın amacı eğitsel arayüz olarak ele alınan bir bölüm web sitesinin kullanılabilirliğinin farklı kullanılabilirlik yöntemleri ile test edilmesi ve mevcut kullanılabilirlik sorunlarının belirlenerek bunların çözümüne yönelik öneriler getirilmesidir. Araştırmanın çalışma grubu ilgili bölümün lisans düzeyindeki 4 öğrencisi ve yine ilgili bölümde lisansüstü öğrenim gören ve/veya çalışan 4’ü araştırma görevlisi biri öğretim üyesi olan 5 akademisyen olmak üzere toplamda 9 kişiden oluşmuştur. Çalışma, kullanıcıların web sitesinde otantik görevleri gerçekleştirme süreçlerine ilişkin performanslarının bilgisayarda kaydedilmesi ve iki katılımcının da göz hareketlerinin izlenmesi şeklinde desenlenmiştir. Çalışmanın geçerliliği için yöntem çeşitlemesi, güvenirliliği için ise araştırmacı çeşitlemesi yoluna gidilmiştir. Verilerin analizinde görev sürecine ve göz izleme yöntemine ilişkin kayıtlar incelenmiş, gözlemcilerin notları ile karşılaştırmalı olarak katılımcıların görevlerde zorlandığı ve tereddütte kaldığı hususlar, her bir görevde harcanan süre, tekrar edilen görevler, başarı ile tamamlanan görevler ve başarısızlıkla sonuçlanan görevler gruplar altında toplanarak tasnif edilmiştir. Elde edilen bulgulardan hem öğrenci hem de akademisyen grubu için kullanılabilirlik sorunları belirlenerek bunların çözümüne yönelik öneriler getirilmiştir.

🔖

Cite This Article

YENİAD, M., MAZMAN, S. G., TÜZÜN, H., AKBAL, S. (2011). Evaluating the Usability of a Departmental Web Site by Authentic Tasks and Eye Tracking Method. Ahi Evran Üniversitesi Kırşehir Eğitim Fakültesi Dergisi, Cilt: 12 - Sayı: 2, 147–173. https://ajindex.com/articles/263678

📄 Full Text PDF Viewer

📄

PDF görüntüleyici hazırlanıyor...

References (9)

  1. Annett, J. (2002). Target paper. Subjective rating scales: Science or art? Ergonomics, 45(14), http://coursesite.cl.uh.edu/hsh/PeresSc/Classes/PSYC5911www/2002AnnettSU SCritique.pdf adresinden erişilmiştir. 28.12.2009 tarihinde Dalcı, M., Alçam, Ö., Saatçioğlu, Y. O ve Erdal F. (2008). ODTÜ kütüphanesi yeni web sayfasının tasarımı ve kullanılabilirlik çalışması. Akademik Bilişim 2008. Çanakkale Onsekiz Mart Üniversitesi.
  2. Denzin, N. K., & Lincoln, Y. S. (1994). The research process. In N. K. Denzin & Y. S. Lincoln (Eds.), Handbook of qualitative research (pp. 45-81).
  3. Thousand Oaks, CA: Sage. De'Sperati, C. (2003). The inner working of dynamic visuo-spatial imagery as revealed by spontaneous eye movements. In J. Hyona, R. Radach, & H. Deubel (Eds.), The mind's eye: Cognitive and applied aspects of eye movement research. (pp. 119- 142). Oxford: Elsevier Science. Doubleday, A., Ryan, M., Springett, M., & Sutcliffe, A. (1997). A comparison of usability techniques for evaluating design. Proceedings of Designing Interactive Systems (DIS '97) Conference. New York: ACM. Press, 101-110.
  4. Duchowski, A.T. (2002). A breadth-first survey of eye tracking applications. Behavior Research Methods, Instruments and Computers, 1-16. 02.01.2010 tarihinde http://citeseerx.ist.psu.edu/viewdoc/download?doi=10.1.1.92.6287&rep=rep1&t ype=pdf adresinden erişilmiştir. Dumas, J. S., & Redish, J. C. (1994). A practical guide to usability testing. Portland, OR: Intellect Books. Frİkjær, E., Hertzum, M., & Hornbæk, K. (2000). Measuring usability: Are effectiveness, efficiency and satisfaction really correlated? In: Proceedings of CHI 2000 Human Factors in Computing Systems (pp. 345–352).
  5. ACM Press.
  6. Folmer, E., & Bosch, J. (2004). Architecting for usability: A survey. The Journal of Systems and Software, 70(1/2), 61-78.
  7. Goldberg, J. H., & Kotval, X. P. (1999). Computer interface evaluation using eye movements: Methods and constructs. International Journal of Industrial Ergonomics, 24, 631-645. Hornbæk, K. (2006). Current practice in measuring usability: Challenges to usability studies and research. International Journal of Human-Computer Studies, 64(2), 79-102.
  8. Höök, K. (1997) Evaluating the utility and usability of an adaptive hypermedia system. In J. Moore, E. Edmonds, & A. Puerta (Eds.) Proceedings of 1997 International Conference on Intelligent User Interfaces, Orlando, Florida, January 7-9, 1997, ACM, pp. 179-186.
  9. Li, X.-J., Yu, Z.-Y., & Liu, C.-Z. (2010). Developing usability measure