사용성 테스트 결과를 어느 수준까지 써야 하는가?

사용성 테스트를 하여 사용성 문제를 발견했을 때, 보고서에 어느 정도 수준까지 써야 하는지 생각해 볼 때가 있다. 사용성 문제에 대해 보고할 때 고려할 수 있는 수준은 다음과 같다.수준 1에서 3까지의 차이는 사용성 문제에 대해서 어느 범위까지 관여를 할 것인가에 대한 차이이다.

 

수준 1. 무엇이 문제인지 기술한다.

수준 2. 무엇이 문제인지 기술한 후, 이슈 해결을 위한 제언을 한다.

수준 3. 무엇이 문제인지 기술하고, 이슈 해결을 위한 제언을 한 뒤,

           개선 시안까지 작성한다.

 

수준 1의 문제는 사용성 이슈를 발견할 것까지는 좋지만, 그래서 무엇을 해야 하는가(So what?)에 대해서는 전혀 알려주지 못한다. 수준 2는 그나마 무엇을 해야 하는지 알려주기는 하지만 구체적으로 어떤 액션을 취해야 하는지에 대해서는 알려주지 못한다는 한계가 있다.

 

수준 3은 구체적인 대안을 제안함으로써, 어떤 액션을 취해야 할지에 대해서 쉽게 결정을 할 수 있다. 실제 Hornbaek과 Frokaer의 연구(2005), Dumas, Molich와 Jeffries(2004)의 연구에 따르면, 디자이너와 개발자도 수준 3 까지 보고서를 작성했을 때, 더 선호한다고 주장하고 있다.

 

하지만, 수준 3까지 작성할 때 주의해야 할 점이 있다. 먼저, 유관부서와의 협력 관계를 긴밀하게 유지해야 한다. 자칫하면 유관부서에서 자기의 R&R을 침범했다고 오해할 소지가 있다. 새로운 개선 시안을 제시했을 때 기획이나 디자이너 직무에 있는 유관부서원들이 왜 자신이 해야 할일을 시키지도 않았는데 했냐고 이야기할 수도 있다. 이런 문제를 해결하기 위해 평소 유관부서원들과 지속적인 커뮤니케이션과 좋은 관계를 유지해서 같은 목표를 향해 나아가는 협력자임을 느끼게 해 줘야 한다.

 

두번째는 사용성 평가 전문가 또는 UX Researcher라고 할지라도 IA 설계나 Interaction 설계에 대한 역량을 충분히 갖고 있어야 한다. IA 설계 능력이나 Interaction 설계에 대한 역량이 부족하다면 새로운 개선 시안을 제안할 수 없게 된다.

 

사용성 평가라는 것은 단지 문제가 있다는 것을 발견하는 것만이 목적이 아니다. 문제를 해결함과 동시에 사용자 경험을 더욱 좋게 만들기 위해서 적극적인 제안을 하는 것이 더 큰 목적인 것이다. 사용성 평가 결과 보고서를 작성할 때 이점에 대해서 명심해야 한다.

 

참고로, Molich, Ede, Kaasgaard와 Karyukin(2004)은 대부분의 사용성 평가 보고서와 다음과 같은 문제로 효용 가치가 떨어진다고 이야기하고 있다.

 

• 보고서가 너무 길다. (보기에도 부담스럽다)
• 요약 페이지가 없다. (무엇이 핵심인지 파악하기가 쉽지 않다)
• 문제의 심각성에 대한 심각성 정도를 알 수 없다. (무엇부터 개선해야 하는지 알지 못하겠다)
• 문제가 무엇인지 명확하지 않거나 모호하다. (도대체 문제가 무엇인지 모르겠다)

 

보고서는 한번에도 무엇이 문제이고 그 문제를 어떻게 하면 해결할 수 있는지 명확하게 작성해야 한다.

 

 

다음 논문은 앞에서 이야기한 내용에 많은 시사점을 줄 수 있을 것이다.

 

Rolf M., Robin J., & Joseph D. (2007), Making Usability Recommendations Useful and Usable