Journals / Ahi Evran Üniversitesi Kırşehir Eğitim Fakültesi Dergisi / 2011 / Cilt: 12 - Sayı: 2suppl

Evaluating the usability of a departmental web site by authentic tasks and eye tracking method

Bir bölüm web sitesinin otantik görevler ve göz izleme yöntemi aracılığıyla kullanılabilirlik değerlendirmesi

Pages
147–173
Publication Date
2022-10-11
DOI
—
🏛️Bibliographic metadata and full text access for this article are provided via DergiPark.
DergiPark Record ↗
✨

AI Summary & Key Takeaways

AI Insight
⚡ TL;DR(Too Long; Didn't Read)

Usability problems were determinedand solutions to these problems were suggested.

📌 3 Key Takeaways

🎯
Objective & Hypothesis:The purpose of this study is to evaluate the usability of a university departmental web siteas an educational interface by using different usability methods, and to determineusability problems of it to suggest solutions to these problems.
📊
Key Findings & Data:The study group wasconsisted of 9 participants including 4 undergraduate students and 5 academicians, 4 ofwhom were research assistants/graduate students, and one of whom was an instructor.
💡
Conclusion & Impact:Usability problems were determinedand solutions to these problems were suggested.
🔬Design:Research Article
📍Scope:Comprehensive Sample
⚙️Variables:Domain Parameters

Abstract

The purpose of this study is to evaluate the usability of a university departmental web siteas an educational interface by using different usability methods, and to determineusability problems of it to suggest solutions to these problems. The study group wasconsisted of 9 participants including 4 undergraduate students and 5 academicians, 4 ofwhom were research assistants/graduate students, and one of whom was an instructor. Study was designed by recording the process of authentic task performance of authenticusers and tracking eye movements of two participants in the department web site. Methodtriangulation method was used for validity of the study and investigator triangulationmethod was used for reliability of the study. In the data analysis, users’ recordings fromthe task performances and eye movements were analyzed and the issues for which usershad difficulties with, the issues which users hesitated with while performing, the timespent on each task, repeated tasks, successful tasks and unsuccessful tasks werediscovered comparatively with the observer notes. Usability problems were determinedand solutions to these problems were suggested.

Özet

Bu çalışmanın amacı eğitsel arayüz olarak ele alınan bir bölüm web sitesininkullanılabilirliğinin farklı kullanılabilirlik yöntemleri ile test edilmesi ve mevcutkullanılabilirlik sorunlarının belirlenerek bunların çözümüne yönelik önerilergetirilmesidir. Araştırmanın çalışma grubu ilgili bölümün lisans düzeyindeki 4 öğrencisive yine ilgili bölümde lisansüstü öğrenim gören ve/veya çalışan 4’ü araştırma görevlisibiri öğretim üyesi olan 5 akademisyen olmak üzere toplamda 9 kişiden oluşmuştur.Çalışma, kullanıcıların web sitesinde otantik görevleri gerçekleştirme süreçlerine ilişkinperformanslarının bilgisayarda kaydedilmesi ve iki katılımcının da göz hareketlerininizlenmesi şeklinde desenlenmiştir. Çalışmanın geçerliliği için yöntem çeşitlemesi,güvenirliliği için ise araştırmacı çeşitlemesi yoluna gidilmiştir. Verilerin analizinde görevsürecine ve göz izleme yöntemine ilişkin kayıtlar incelenmiş, gözlemcilerin notları ilekarşılaştırmalı olarak katılımcıların görevlerde zorlandığı ve tereddütte kaldığı hususlar,her bir görevde harcanan süre, tekrar edilen görevler, başarı ile tamamlanan görevler vebaşarısızlıkla sonuçlanan görevler gruplar altında toplanarak tasnif edilmiştir. Elde edilenbulgulardan hem öğrenci hem de akademisyen grubu için kullanılabilirlik sorunlarıbelirlenerek bunların çözümüne yönelik öneriler getirilmiştir.

🔖

Cite This Article

YENİAD, M., AKBAL, S., MAZMAN, S. G., TÜZÜN, H. (2022). Evaluating the usability of a departmental web site by authentic tasks and eye tracking method. Ahi Evran Üniversitesi Kırşehir Eğitim Fakültesi Dergisi, Cilt: 12 - Sayı: 2suppl, 147–173. https://ajindex.com/articles/431085

📄 Full Text PDF Viewer

📄

PDF görüntüleyici hazırlanıyor...

References (9)

  1. Annett, J. (2002). Target paper. Subjective rating scales: Science or art? Ergonomics, 45(14), 966-987. 28.12.2009 tarihinde http://coursesite.cl.uh.edu/hsh/PeresSc/Classes/PSYC5911www/2002AnnettSU SCritique.pdf adresinden erişilmiştir. Dalcı, M., Alçam, Ö., Saatçioğlu, Y. O ve Erdal F. (2008). ODTÜ kütüphanesi yeni web sayfasının tasarımı ve kullanılabilirlik çalışması. Akademik Bilişim 2008. Çanakkale Onsekiz Mart Üniversitesi.
  2. Denzin, N. K., & Lincoln, Y. S. (1994). The research process. In N. K. Denzin & Y. S. Lincoln (Eds.), Handbook of qualitative research (pp. 45-81).
  3. Thousand Oaks, CA: Sage. De'Sperati, C. (2003). The inner working of dynamic visuo-spatial imagery as revealed by spontaneous eye movements. In J. Hyona, R. Radach, & H. Deubel (Eds.), The mind's eye: Cognitive and applied aspects of eye movement research. (pp. 119- 142). Oxford: Elsevier Science. Doubleday, A., Ryan, M., Springett, M., & Sutcliffe, A. (1997). A comparison of usability techniques for evaluating design. Proceedings of Designing Interactive Systems (DIS '97) Conference. New York: ACM. Press, 101-110.
  4. Duchowski, A.T. (2002). A breadth-first survey of eye tracking applications. Behavior Research Methods, Instruments and Computers, 1-16. 02.01.2010 tarihinde http://citeseerx.ist.psu.edu/viewdoc/download?doi=10.1.1.92.6287&rep=rep1&t ype=pdf adresinden erişilmiştir. Dumas, J. S., & Redish, J. C. (1994). A practical guide to usability testing. Portland, OR: Intellect Books. Frøkjær, E., Hertzum, M., & Hornbæk, K. (2000). Measuring usability: Are effectiveness, efficiency and satisfaction really correlated? In: Proceedings of CHI 2000 Human Factors in Computing Systems (pp. 345–352).
  5. ACM Press.
  6. Folmer, E., & Bosch, J. (2004). Architecting for usability: A survey. The Journal of Systems and Software, 70(1/2), 61-78.
  7. Goldberg, J. H., & Kotval, X. P. (1999). Computer interface evaluation using eye movements: Methods and constructs. International Journal of Industrial Ergonomics, 24, 631-645. Hornbæk, K. (2006). Current practice in measuring usability: Challenges to usability studies and research. International Journal of Human-Computer Studies, 64(2), 79-102.
  8. Höök, K. (1997) Evaluating the utility and usability of an adaptive hypermedia system. In J. Moore, E. Edmonds, & A. Puerta (Eds.) Proceedings of 1997 International Conference on Intelligent User Interfaces, Orlando, Florida, January 7-9, 1997, ACM, pp. 179-186.
  9. Li, X.-J., Yu, Z.-Y., & Liu, C.-Z. (2010). Developing usabilit