사용성 테스트(Usability Testing)는 사용자 중심 인터랙션 디자인 분야에서 실제 사용자를 대상으로 제품이나 서비스를 테스트하여 그 사용성을 평가하는 기법이다. 이 방법은 사용자가 시스템을 어떻게 사용하는지에 대한 직접적인 관찰 정보를 제공하며, 제품의 디자인 직관성과 관련이 깊다. 사용성 테스트는 전문가가 사용자 참여 없이 인터페이스를 평가하는 사용성 검사(heuristic evaluation) 방법과 대조된다.
정의 및 목적
사용성 테스트는 사람이 만든 제품이 의도한 목적을 얼마나 효과적(effective), 효율적(efficient), 만족스럽게(satisfying) 달성할 수 있는지를 측정하는 데 중점을 둔다. 국제표준 ISO 9241-11은 사용성을 위의 세 가지 측정 가능한 차원으로 정의한다. 단순히 사용자의 의견을 수집하는 시장 조사나 질적 연구와는 달리, 사용성 테스트는 통제된 조건에서 사용자의 행동을 체계적으로 관찰하는 것을 핵심으로 한다.
주요 유형
사용성 테스트는 목적과 방식에 따라 여러 유형으로 구분된다. 형성적(탐색적) 사용성 테스트는 개발 초기 단계에서 문제를 발견하고 개선 방향을 도출하는 데 목적이 있다. 요약적(평가적) 사용성 테스트는 개발 후기나 출시 이후에 제품의 전반적인 사용성 수준을 정량적으로 측정하고 평가하는 데 사용된다. 비교 사용성 테스트는 두 개 이상의 대안(경쟁사 제품, 디자인 프로토타입의 다른 버전 등)을 동일한 조건에서 평가하여 상대적 장단점을 파악한다.
실행 방법론
실행 방식에 따라 실험실 테스트, 원격 조정 테스트, 원격 비조정 테스트로 나뉜다. 실험실 테스트는 전용 사용성 실험실에서 진행자와 참가자가 같은 공간에 위치하여 진행되며, 가장 통제된 환경을 제공한다. 원격 조정 테스트는 화면 공유 및 음성 통화 도구를 통해 진행자와 참가자가 실시간으로 소통하며 진행된다. 원격 비조정 테스트는 참가자가 자신의 환경에서 미리 정의된 과제를 수행하고, 그 과정이 자동화된 소프트웨어를 통해 기록된다.
핵심 절차
사용성 테스트는 일반적으로 다음의 5단계로 진행된다. 첫째, 테스트 목표와 범위를 정의하는 계획 수립 단계이다. 둘째, 실제 사용자나 잠재 사용자를 대표할 수 있는 참가자를 모집한다. 셋째, 현실적인 시나리오와 과제(task)를 설계한다. 넷째, 참가자가 과제를 수행하는 과정을 관찰하고 기록하는 테스트를 실행한다. 다섯째, 수집된 데이터를 분석하여 문제점을 식별하고 개선 방향을 제시하는 보고서를 작성한다.
참가자 수
1990년대 초 제이콥 닐슨(Jakob Nielsen)은 5명의 참가자만으로도 주요 사용성 문제의 약 85%를 발견할 수 있다는 주장을 제기했다. 이는 수학적 모델 U = 1 − (1 − p)^n (p는 한 피험자가 특정 문제를 식별할 확률, n은 피험자 수)로 설명되었다. 그러나 이후 연구에서는 사용자 집단의 이질성과 문제 발견의 난이도 차이를 고려할 때 5명이 항상 충분하지는 않다는 비판이 제기되었다. 현대 실무에서는 단일 사용자 그룹의 경우 6~8명, 복수 사용자 그룹의 경우 그룹당 5~6명, 정량 벤치마크가 필요한 경우 30명 이상의 참가자를 권장하는 것이 일반적이다.
데이터 수집 기법
사용성 테스트 중 데이터를 수집하는 대표적인 기법으로는 생각 발성법(think-aloud protocol), 공동 발견 학습(co-discovery learning), 시선 추적(eye tracking) 등이 있다. 생각 발성법은 참가자가 과제를 수행하면서 떠오르는 생각을 계속 말로 표현하도록 요청하는 방법으로, 사용자의 인지 과정을 이해하는 데 효과적이다.
주요 측정 지표
사용성 테스트의 주요 측정 지표는 효율성(과제 완료 시간, 클릭 수 등), 효과성(과제 성공률, 오류 발생 빈도 등), 만족도(시스템 사용성 척도[SUS], 단일 난이도 질문[SEQ] 등 표준화된 설문을 통해 측정)의 세 가지 축으로 구성된다.
활용 분야
사용성 테스트는 웹사이트, 모바일 애플리케이션, 소프트웨어, 키오스크, 디바이스, 문서, 소비재 등 다양한 제품과 서비스의 평가에 활용된다. Google, Microsoft, Amazon, Apple 등 글로벌 빅테크 기업들은 개발 사이클 전반에 걸쳐 사용성 테스트를 정기적으로 수행하는 것으로 알려져 있다.
