효율적인 스마트러닝 앱 사용성 평가 방법 연구 = A Study on Efficiency Usability Evaluation Method for Smart Learning App

다국어 초록 (Multilingual Abstract)

The purpose of this study is to propose a heuristic checklist and evaluation method for the efficient use of smartphone-based smart learning apps. To evaluate usability for smart learning apps, a checklist was drawn first based on the relevance of heuristics, smartphone interface elements, and app-based learning influence factors. Based on this, the experts’ evaluation was conducted. Difficulties and problems in the expert evaluation process were combined to derive an improved secondary checklist. Also, more than five representative screens of the app were additionally provided as printed paper for the intuitive feedback writing of the evaluator. As a result of usability evaluation, the first and second evaluation resulted in similar problems of the evaluation app, but the time was reduced from 110 minutes to 50 minutes. Besides, four items requiring educational expertise were further evaluated by multimedia pedagogical experts. This has resulted in the severity of the problem overlooked by previous UI/UX experts. Finally, we propose 42 heuristic checklists and evaluation progress considerations as an evaluation method to consider the characteristics of smart learning, to improve educational quality, and to improve the usability effectively for the fast cycle of mobile app development.

국문 초록 (Abstract)

본 연구는 스마트폰 기반의 스마트러닝 앱의 효율적인 사용성 개선을 위한 휴리스틱 체크리스트와 평가 방법을 연구한다. 스마트러닝 앱에 맞춤화된 사용성 평가를 위해 휴리스틱의 주요 요소들을 스마트폰의 인터페이스 및 앱 기반 학습에 영향을 미치는 요소들과의 연계를 통해 체크리스트를 1차로 도출하여 전문가 평가를 시행한다. 평가 과정에서의 어려움과 문제점을 종합하여 개선된 체크리스트를 2차로 도출한다. 그리고 평가자의 직관적인 피드백 작성을 위한 앱의 대표화면 5개 이상을 지면으로 추가로 제공하여 사용성 평가를 수행한 결과는 다음과 같다. 1차와 2차 평가는 평가 대상 앱의 유사한 문제점을 도출하였지만, 소요 시간은 110분에서 50분으로 단축된다. 또한 교육적인 전문성이 필요한 4개의 평가를 위해 멀티미디어교육학 전문가의 추가 평가를 수행하여 기존 UI/UX 전문가들에 의해 간과된 문제의 심각성을 도출하게 된다. 스마트 폰이라는 제한된 인터페이스, 스마트러닝의 환경적인 특성을 고려하고, 교육적인 질제고 및 모바일 앱 개발의 빠른 주기에 맞는 효율적인 사용성 개선을 위한 평가 방안으로 휴리스틱 체크리스트 42개와 평가 진행상의 고려사항을 위와 같이 제안한다.

참고문헌 (Reference)

• 1 김인숙, "캐릭터 애니메이션 기반 모바일 외국어어휘 학습 앱 효과 분석" 한국멀티미디어학회 21 (21): 1526-1533, 2018
• 2 허진주, "영어학습을 위한 스마트러닝 어플리케이션 기획 및 사용자 인터페이스 디자인" 19 (19): 717-719, 2016
• 3 노규성, "스마트러닝의 개념 및 구현 조건에 관한 탐색적 연구" 한국디지털정책학회 9 (9): 79-88, 2011
• 4 박주환, "모바일어플리케이션의 사용성 평가 방법 비교 분석" 154-157, 2012
• 5 Peters, K, "m-Learning : Positioning educators for a mobile, connected future" 8 (8): 113-132, 2007
• 6 Nielsen, J., "Usability Inspection Methods" John Wiley &Sons 1994
• 7 Nielsen, J., "Usability Inspection Methods" Wiley 1994
• 8 J. C. Roca, "Understanding e-learning continuance intention : An extension of the Technology Acceptance Model" 64 (64): 683-696, 2006
• 9 K. Nyiri, "Towards a philosophy of m-learning" 121-124, 2002
• 10 R. Saadé, "The impact of cognitive absorption on perceived usefulness and perceived ease of use in on-line learning : an extension of the technology acceptance model" 42 (42): 317-327, 2005
• 11 F. D. Davis, "Perceived Usefulness, Perceived Ease of Use, and User Acceptance of Information Technology" 13 (13): 319-339, 1989
• 12 Leung, C.H, "Mobile learning: A new paradigm in electronic learning" 76-80, 2003
• 13 J. Kim, "Human Computer Interaction Introduction" Ahn Graphics Publishers 2010
• 14 Cockton, "Fundamentals, evolving technologies and emerging applications, The Human-Computer Interaction Handbook" Lawrence Erlbaum Associates 2003
• 15 J. Nielsen, "Finding usability problems through heuristic evaluation" 373-380, 1992
• 16 Nielsen, J., "Enhancing the explanatory power of usability heuristics" 152-158, 1994
• 17 M. Lu, "Effectiveness of vocabulary learning via mobile phone" 24 (24): 515-525, 2008
• 18 J. Traxler, "Defining, discussing and evaluating mobile learning:The moving finger writes and having writ.." 8 (8): 2007
• 19 J. Traxler, "Accessibility and mobile learning, Mobile learning: A handbook for educators and trainers" Routledge 57-69, 1997
• 20 J. Nielsen, "A Mathematical model of the Finding of Usability Problems" 206-213, 1993
• 21 "10 Usability Heuristics for User Interface Design"