기본 콘텐츠로 건너뛰기

사용성 테스트는 언제, 어떤 목적을 가지고 누가 해야하는가?

여러분 조직에서는 사용성 테스트를 언제 어떤 목적을 가지고 누가 하고 계십니까?

제 짧고 미천한 경력으로 함부로 우리 나라에서는 대체로 이러 이러하다라는 결론은 일반화의 오류가 발생할 확률이 99.999%인지라 함부로 말씀드리지는 않겠습니다.

이후의 글은 제 개인적인 경험과 개인적인 의견이 마구 잡이로 섞여 있는 글로 읽어보시고 크게 한번 웃어버리고 잊어버리시거나 댓글 등으로 의견을 주시면 고맙겠습니다.

저는 사용성 테스트의 목적은 크게 3가지로 분류합니다.

첫째는 창조, 둘째는 개선, 셋째는 측정입니다.

첫째 창조는 디자이너들이 디자인을 할 때 행하는 사용성 테스트를 말합니다.

사용자 조사나 현장 조사, 퍼소나, 멘탈 모델 등이 여기에 해당된다고 생각합니다.

이 단계의 사용성 테스트는 개발 초기에 이루어지며 디자이너가 주체가 되어 수행됩니다.

말 그대로 UI나 UX등을 만들어 내기 위한 데이터를 수집할 목적으로 수행되는 테스트입니다.

둘째는 개선입니다.

개선은 만들어진 UI나 UX의 개발 가능성을 확인하고 개발 과정에서 지속적으로 사용성을 확인하여 부족한 부분을 반영하여 사용성을 개선하기 위한 목적으로 수행되는 테스트를 말합니다.

프로토타입, 와이어 프레임, 베타 버전등에 대해 수행되는 사용자 테스트가 여기에 해당된다고 생각합니다.

이 단계의 사용성 테스트는 개발 기간 전체에 걸쳐 이루어지며, 이 테스트에는 개발과 관련된 모든 이해관계자가 참석하고 사용성 테스터가 주체가 되어야 한다고 생각합니다.

셋째는 측정입니다.

측정은 개발 마지막에 그동안 창조하고 개선한 사용성이 실제로 제품에 제대로 내재화 되었는지 측정하는 테스트를 말합니다.

각종 통계적 방법을 동원하여 측정하는 수많은 방법들이 여기에 해당된다고 생각합니다.

이 단계의 사용성 테스트는 말 그대로 측정일 뿐 개선과는 연관이 없습니다.

이 단계의 사용성 테스느도 사용성 테스터가 주체가 된다고 생각합니다.

여기서 제가 말하고 싶은 내용은 아래와 같습니다.

1. 사용성 테스트를 UI가 확정되고 개발이 끝나가는 개발 마지막 단계에 수행하는 것은 사용성의 개선에 거의 도움이 되지 않는다. 사용성을 실제로 개선하고 제품에 내재화 하기 위해서는 개발 초반부터 개발 기간에 걸쳐 자주 수행되어야만 한다.

2. 사용성 테스트를 UX팀이나 디자이너에게만 전적으로 맡기는 것은 보이지 않는 것에 대한 믿음과 다를 바가 없다는 것입니다. 개발자가 개발한 코드와 결과물에 대하여 테스터가 교차로 검증하는 것과 마찬가지로 디자이너가 만들어낸 결과물에 대해서도 테스터가 그 결과물을 교차로 검증하고 서로 협력하여 개선하여야 한다는 것입니다.

그런데, 제 경험에 의하면 실제로 우리 현실은 아래와 같다고 생각합니다.

1. 사용성 테스트는 일반적으로 개발 마지막 단계에 수행하며, 개선해야한다고 보고되는 수많은 문제들은 실제적으로 해결되는 경우가 많지 않다.

2. 사용성 테스트는 UX팀이나 디자이너의 고유 업무로 테스터가 개입할 테스트가 아니다.

그래서 우리 나라 제품들의 사용성은 언제나 개판이라고 생각합니다.

저는 우리 나라 제품들의 사용성이 개선되기 위해서는 개발 전반에 걸쳐 사용성 테스트를 수행할 수 있는 능력있는 테스터의 육성이 필요하며 그런 테스터와 협업하여 사용성을 개선시킬 수 있는 능력있는 디자이너가 절대적으로 필요하다고 생각합니다.

여러분들은 어떻게 생각하시는지요?

저는 그래서 디자이너가 아닌 테스터들을 위한 사용성 테스팅 교육을 몇년째 해오고 있지만 박쥐나 계륵과 같이 취급당하는 것 같아 맘이 좋지 않습니다. 좀 더 많은 테스터들이 사용성 테스트에 관심을 가져주었으면 하는 바램입니다.

댓글

이 블로그의 인기 게시물

스위치봇 & 스위치봇 허브 미니 간단 사용기

제 블로그에 예전부터 오셨던 분들은 제가 사브작 사브작 홈 오토메이션을 어설프게 해온 것을 아실겁니다. 작년부터 너무 하고 싶었던 도어락 자동화에 도전해봤습니다. 우리 나라에 자체 서비스로 앱을 통해 도어락을 제어하는 제품은 꽤 있습니다. 게이트맨도 있고, 키위도 있고, 삼성도 있죠.. 그런데.. 전 그것보다 구글 어시스턴트를 지원하는 도어락이 필요했는데... 그런건 안만들더라구요.. 꼭 필요한건 아니지만 웬지 해보고 싶은데... 언제 제품이 출시될지도 몰라서.. 가능한 방법을 찾아보다가.. 스위치봇이라는 제품으로 도어락을 버튼을 꾹 누르는 방법을 찾아서 스위치봇이 직구가 아닌 국내에 출시되었길래 낼름 구매해서 도전해봤습니다. 스위치봇 제품에 대한 내용이나 구매는  https://www.wakers.shop/  에서 하시면 됩니다. 저는 스위치봇에 스위치봇을 구글 홈에 연결시키기 위해 스위치봇 허브 미니까지 구매했습니다. 스위치봇 허브 미니가 없으면 스위치봇을 외부에서 제어하거나 구글 홈에 연결할 수 없습니다. 그리고 제가 스위치봇 허브 미니를 구매한 이유 중 다른 하나는 이 제품이 RF 리모컨 기능이 지원됩니다. 집에 있는 모니터를 제어할 필요가 있어서 이참 저참으로 같이 구매했습니다. 제품 등록은 어렵지 않습니다. 여기서는 스위치봇 허브 미니에 RF 리모컨을 등록해서 구글 어시스턴트로 제어하는 방법을 소개해드릴까 합니다. 제가 스위치봇 허브 미니로 모니터를 제어하고 싶었던 부분은 컴퓨터에서 크롬캐스트로 외부 입력을 때에 따라 바꿔야 하는데.. 그때마다 리모컨을 찾는게 너무 불편해서였습니다.  어차피 리모컨은 외부 입력 바꿀 때 빼고는 쓸 일도 없는지라.. 매번 어디로 사라지면 정말 불편해서 이걸 자동화 하고 싶었습니다. 그런데, 처음에 스위치봇 허브 미니를 등록하고 여기에 리모컨을 등록하니.. 구글 홈에 등록된 리모컨이 자동으로 등록이 됩니다. 그런데, 등록된걸 확인해보니 전원 On/Off만 제어되는 것이고, 나머지 버튼은 구글 홈...

20년 차 테스터가 고른 최근 IT 소식: 기술의 속도, 그리고 사람의 자리

20년 넘게 IT 업계에서 테스팅하고 강의하고 공부하고 여러 일을 해왔지만... 정말이지 단 하루도 편하게 쉴 틈을 주지 않는 세상입니다. 특히 최근 4~5년 동안 가속화된 AI의 물결은 기술의 스펙트럼뿐만 아니라 우리가 일하고, 협업하고, 조직을 이끄는 방식 전체를 뒤흔들고 있습니다. 이번 주에도 수많은 뉴스레터와 아티클을 훑어보았습니다. 그중에서도 기술의 화려함 뒤에 숨겨진 ‘사람, 조직, 그리고 커리어의 본질’을 찌르는 글 몇 개가 눈에 띄어 메모해 둡니다. 제 평소 생각과 맞닿아 있는 6가지 이야기입니다. --- 1. 인지부채(Cognitive Debt): 바이브 코딩 시대에 우리가 지게 되는 진짜 빚 (출처: ROBOCO - 인지부채: 바이브 코딩 시대의 새로운 부채 관리법 / 정도현 수석 컨설턴트 ) 요즘 커서(Cursor)나 클로드 코드(Claude Code) 같은 에이전트를 붙여 "이거 만들어줘" 하고 승인(Approve) 버튼만 누르면 눈 깜짝할 사이에 코드베이스가 완성되는 '바이브 코딩(Vibe Coding)'이 유행입니다. 그런데 속도는 엄청나게 빠른데, 정작 서비스에 장애가 나면 "AI가 짜서 잘 모르겠는데요?"라는 답이 나오는 이상한 현상이 벌어집니다. 정도현 컨설턴트는 이를 '인지부채(Cognitive Debt)'라고 정의합니다. 코드는 쌓이는데, 정작 인간의 시스템 이해도는 쌓이지 않는 격차죠. * Human-in-the-loop의 환상: AI가 초당 수백 줄을 뽑아내는데 사람이 일일이 검토한다? 결국 검토자는 병목이 되고, 시간 압박에 쫓겨 영혼 없이 승인 버튼만 누르게 됩니다. 40년 전 자동화 연구(Bainbridge, 1983)가 지적했듯, 자동화될수록 사람은 감시만 하다가 정작 개입해야 할 결정적 순간에 숙련도를 잃어버립니다. * 부채는 0으로 만드는 게 아니라 '관리'하는 것: AI가 만든 모든 코드를 사람이 외울 수는 없습니다. 핵심은 ...

우리는 AI로 '더 빠른 말'을 키우고 있는걸까요? 아니면 '자동차'를 만들고 있는걸까요?

20년 넘게 IT 현장에서 뒹굴거렸는데... 요즘처럼 "우리가 지금까지 당연하게 여겨온 일하는 방식의 본질"에 대해 근본적인 질문을 던지게 만드는 때가 없었던 것 같습니다. 최근 읽은 UX 관련 글 하나가 가슴을 쿵 치고 지나갔습니다. UX 및 디지털 트렌드를 다루는 블로그 ux4dotcom에 올라온 "Beyond Faster Horses — Why AI Challenges One of UX's Oldest Assumptions"라는 글입니다. (출처: ux4dotcom - Beyond Faster Horses — Why AI Challenges One of UX's Oldest Assumptions ) 혁신을 말할 때 늘 인용되는 헨리 포드의 유명한 말이 있습니다. "사람들에게 무엇을 원하느냐고 물었다면, 그들은 '더 빠른 말'이라고 답했을 것이다." 사람들은 자신이 경험해 본 범위 안에서만 미래를 상상합니다. 말만 탈 줄 아는 사람에게 자동차는 상상 밖의 범주(Mental Model)니까요. 저자는 그동안 UX(사용자 경험)라는 학문과 필드 자체가 '더 빠른 말을 만드는 일(기존 과업의 효율화)'에 집중해 왔다고 지적합니다. 사용자의 행동을 관찰하고, 마찰(Friction)을 줄이고, 화면을 간소화하고, 기존 워크플로우를 최적화해 주는 작업 말입니다. 실제로 주변을 봐도 우리가 AI를 쓰는 방식도 대부분 이 범주를 벗어나지 못하고 있습니다. 더 빠르게 이메일을 작성하고, 문서 요약을 3초 만에 끝내고, 프레젠테이션 장표나 일정표를 순식간에 만들어내는 일. 분명 유용하고 저 역시 매일 요기하게 쓰고 있지만, 이건 어디까지나 '기존에 인간이 하던 일의 프로세스를 흉내 내어 속도만 올린 것(Faster Horse)'에 불과합니다. 정작 "이 워크플로우 자체가 과연 계속 존재해야 하는가?"라는 근본적인 질문은 던지지 못하고 있는 것이죠....