기본 콘텐츠로 건너뛰기

소극장을 만들어라. - 관찰실과 관찰자

------------------------------------------------------------

1. 사용성 테스팅(Massive and Rapid Usability Testing)

 가. 사용성 테스팅의 정의

 나. Rapid Usbility Testing

 다. Massive Usability Testing vs. Rapid Usability Testing

2. 사용성 테스팅 계획(개발 수명주기에서의 사용성 테스팅)

 가. 사용성 테스팅은 언제 수행하나요?

3. 참가자 선정

 가. 사용성 테스팅에 얼마나 많은 참가자가 적당한가?

 나. 사용성 테스팅에서 사용자란 누구인가?

4. 사용성 테스팅 수행

 가. 사용자 테스팅
  - 사용자 테스팅 소개
  - 테스트 과제와 시나리오 작성
  - 관찰실
  - 테스트 진행
  - 회고 그리고 보고서
  - 체크리스트
  - 사용자 테스팅의 장점과 단점

 나. 카드 소팅

 다. 소원의 나무

5. 정리(?)

------------------------------------------------------------

사용자 테스팅은 한편의 아름다운 연극과 같습니다.

하지만 아무리 아름다운 연극이라고 해도 지켜보는 관객이 없다면 의미가 없을 것입니다.

마찬가지로 사용자 테스팅과 진행자와 참가자 못지 않게 중요한 사람들이 관찰자들입니다.

여러분이 사용자 테스팅을 하실 때에는 되도록 많은 관찰자들을 부르시기 바랍니다.

관리자, 개발자, 디자이너, 편집자, 카피라이터, 사장님을 포함한 임원진 등 제품 개발에 관련된 사람들이라면 누구든지 상관없습니다.

되도록 많은 사람들을 부르기 위해 할 수 있는 모든 것을 하시기 바랍니다.

되도록 많은 사람들을 초대하기 위한 방법 중 아래와 같은 방법들은 좋은 효과가 있습니다.

1. 사장님을 포함한 임원진들을 모셔라!!
그렇습니다. 경영진이 잠깐이라도 참여를 하게 된다면 보다 많은 사람들이 테스트에 관심을 가지게 됩니다.
그리고 테스트를 무시하기 힘들게 됩니다.
경영진의 참석은 다른 사람들을 테스트에 참여하도록 설득하기 가장 쉬우면서도 가장 강력한 방법 중 하나입니다.
단점은 경영진의 참여를 이끌어내는 것이 어렵다는 것입니다.

2. 빵빵한 간식을 제공한다.
사람들은 은근히 먹을것에 취약합니다. 고급스런 간식과 점심을 보장한다면 많은 사람들이 올 수 있을 겁니다.
언제 만들었는지 모를 김밥이나 정성이라고는 눈꼽만치 없는 피자나 햄버거 보다는 커피 전문점의 상큼한 케익 한조각에 홍차 한잔의 간식은 천양지차입니다.

3. 사람들이 참여하기 쉬운 시간으로 정한다.
되도록이면 테스트 날짜를 그 주의 또는 그 달의 가장 한가한 시간으로 정하시기 바랍니다.
게임회사라면 업데이트가 몰리는 매월 말일과 같은 지옥과 같은 시간을 피하시기 바랍니다.

그 외에도 여러분이 생각할 수 있는 가능한 방법들을 동원하여 되도록 많은 사람들이 참여할 수 있도록 독려하시기 바랍니다.

그렇다면 사용자 테스팅에 참여하는 관찰자들은 어떤 일을 하게 될까요?

관찰자들이 하는 일은 간단합니다.

1. 참가자의 행동을 보고 참가자의 생각을 듣고 필요한 내용을 받아 적습니다.
2. 하나의 세션이 끝나고 나면 자신이 생각하는 가장 심각한 문제점 3개를 골라 적습니다.
3. 진행자가 참가자에게 했으면 하는 질문을 제안합니다.
4. 간신을 맛있게 먹습니다.
5. 회고를 위한 점심 식사에 참가합니다.

간단합니다. 이게 전부입니다.

관찰자로 초대하고 싶은 사람이 참가에 부담을 느낀다면 전혀 어려운 일은 없으며, 오셔서 맛있는 간식과 함께 연극 또는 영화 한편을 본다고 생각하시면 된다는 점을 강조하시면 됩니다.

아래는 관찰자들에게 제공하는 안내문 예시입니다.


다음은 관찰자들이 사용자 테스트를 관찰할 관찰실입니다.

관찰실은 일반적으로 회의실을 사용하시면 됩니다.

만약 참가하는 관찰자들이 정말 많다면 강당이나 소극장등을 사용하셔도 됩니다.

인터넷이 제공되고 빔 프로젝트가 있으며, 참가자의 음성을 들을 수 있는 곳이라면 어디든 상관 없습니다.

다만 한가지 고려할 점은 이전에도 얘기한 것처럼 테스트실과 관찰실이 물리적으로 같은 공간안에 있지 않도록 하는 것이 좋다는 것입니다.

이유는 여러가지가 있지만 참가자의 행동에 관찰자들이 소리내어 웃거나 비난하는 경우 참가자가 상처를 받을 수도 있으며, 많은 관찰자들은 참가자와 이야기 하기 위해 무던히도 애를 쓰기 때문입니다.

절대로 관찰실의 관찰자들이 테스트실의 위치를 알지 못하도록 해야하며, 두 공간이 같은 공간에 있지 않도록 주의하시기 바랍니다.

관찰실에는 다음과 같은 장비들이 구비되어야 합니다.

1. 인터넷 접속이 가능하고 화면 공유 소프트웨어가 설치된 컴퓨터
2. 빔 프로젝터(아니면 엄청 큰 텔레비젼)
3. 스피커(소리만 잘 나오면 됩니다. 5.1 채널 스피커 같은 고가의 장비는 있으면 좋겠지만 필수는 아닙니다.)
4. 빵빵한 간식!! (이것은 정말 중요한 것입니다. 베이글이나 머핀과 커핀 한잔이면 충분하다. 만약 관찰실에 있는 사람들이 즐겨 먹는 간식이 있다면 그것도 좋은 선택이 될 것입니다. Jolt Coke 한 캔이면.. 오우~~)
5. 스피커폰 또는 메신저(테스트실과 연락하기 위해서 필요합니다. 저는 화면 공유 소프트웨어가 같이 제공되는 스카이프를 즐겨 사용합니다.)

관찰실이 준비되었다면 이제 관찰실에서 관찰자들을 통제하고 안내하고 도와줄 관찰실 모니터링 요원이 필요합니다.

관찰실 모니터링 요원은 당신의 동료 중 가장 믿을만하고 친한 사람 중 한사람에게 부탁하시면 됩니다.

아래는 관찰실 모니터링 요원을 위한 안내문입니다.


위의 안내문에 적힌 내용 외에 관찰실 모니터링 요원이 수행해야할 가장 중요한 활동이 있습니다.

그것은 각 세션이 끝나고 관찰자들이 제출하는 가장 심각한 사용성 문제 3가지를 정리하는 작업입니다.

이 작업은 절대 간단한 작업이 아닙니다.

예를 들어 관찰실에 20명의 관찰자가 참여한다면 한 세션당 무려 60개의 사용성 문제가 제출될 것입니다.

이렇게 3개의 세션이 진행되면 전체 사용성 문제는 무려 180개나 됩니다. 이 많은 의견들을 취합하고 같은 내용을 분류하여 정리를 하는 일은 결코 간단하지 않습니다.

원활한 회고 진행을 위해서는 관찰실 모니터링 요원이 회고가 시작되기 전에 이 작업을 끝마칠 필요가 있습니다.

때문에 관찰실 모니터링 요원을 지정하실 때에는 타자가 눈이 부실만큼 빠르고 데이터 정리를 잘하는 사람을 뽑으시는 것도 좋은 방법입니다.

이런 이유로 사용자 테스트에는 되도록 많은 관찰자가 참여하는 것이 좋지만 참여하는 관찰자의 수를 제한하기도 합니다. 저는 개인적으로 10~20명 정도의 관찰자를 추천해 드립니다.

아니면 관찰실 모니터링 요원을 2명 이상 운용하시는 방법도 있습니다.

이제 테스트 과제와 시나리고 그리고 관찰실과 테스트실의 준비가 끝나셨다면 다음은 실제 테스트 진행입니다.

다음 포스트에는 실제 테스트를 진행하는 부분에 대해서 다루도록 하겠습니다.

댓글

이 블로그의 인기 게시물

테슬라 구매 과정 후기

올해 제 인생 최대 지름이 될.. 테슬라 구매를 했습니다. 스파크만 13년을 몰았는데... 내자분이 애들도 컸고.. 이젠 스파크가 좁고 덥고 힘들다면서... 4월 6일 하남 테슬라 전시장에서 새로 나온 업그레이드 된 모델 3를 보고 4월 7일 덜컥 계약을 해버리게 되었습니다. 이후에 4월 11일에 보조금 설문 조사 문자를 받았습니다. 그리고 다시 기다림의 시간이.. 사실, 처음에 하얀색을 계약을 했다가 하얀색은 관리하기가 너무 힘들거 같아 4월 20일에 블루로 변경을 했었는데.. 다른 사람들은 하나 둘 차량을 인도 받는데.. 아무리 기다려도 인도 일정이 배정이 되지 않아서... 혹시나 하고 4월 25일 하얀색으로 변경하자마자 VIN이 배정되고 4월 29일 인도 일정 셀프 예약 문자가 왔습니다. 파란색이 정말 인기가 없었나 봅니다. (그런데, 소문에 듣자하니.. 파란색은 5월 첫주부터 인도 일정 셀프 예약 문자가 왔었다고 합니다.. 크흑.. ㅠㅠ) 덕분에 기다리고 기다리긴 했지만 아무 준비도 없던 와중에 이제부터 정말 실제 차량을 인도받기 위한 질주가 시작되었습니다. 4월 30일 셀프 인도 예약 완료 문자가 왔고 5월 2일 오전 10시 5분에 전기자동차 구매지원 자격 부여 문자가 오고 오후 3시 5분에 전기차 보조금 지원 대상자 확정 문자를 받았습니다. 사실 기다림의 시간이 제일 힘든건.. 보조금을 못받으면 어떻게 하지?라는 초조함이었습니다. 얼마 안되는 보조금이라고 하더라도 한푼이 아쉬운 입장에서는 정말 필요한 돈이었는데.. 다행히 큰 문제 없이 지원 대상자가 될 수 있었습니다. 그리고 5월 2일 오후 4시 12분에 차량 대금을 후다닥 결제를 진행했습니다. 유투브와 네이버 카페 등을 열심히 읽어두었지만 막상 진행해보니 다른 설명과는 좀 다르게 진행되어서 불안했었는데.. 큰 문제 없이 결제가 완려되었습니다. 이미 차량 인도는 5월 14일로 결정되었기 때문에 이제는 차량 등록에 대한 기다림이 시작되었습니다. 드디어 5월 8일 오후 2시 23분에 등록 대행 비용 및...

스위치봇 & 스위치봇 허브 미니 간단 사용기

제 블로그에 예전부터 오셨던 분들은 제가 사브작 사브작 홈 오토메이션을 어설프게 해온 것을 아실겁니다. 작년부터 너무 하고 싶었던 도어락 자동화에 도전해봤습니다. 우리 나라에 자체 서비스로 앱을 통해 도어락을 제어하는 제품은 꽤 있습니다. 게이트맨도 있고, 키위도 있고, 삼성도 있죠.. 그런데.. 전 그것보다 구글 어시스턴트를 지원하는 도어락이 필요했는데... 그런건 안만들더라구요.. 꼭 필요한건 아니지만 웬지 해보고 싶은데... 언제 제품이 출시될지도 몰라서.. 가능한 방법을 찾아보다가.. 스위치봇이라는 제품으로 도어락을 버튼을 꾹 누르는 방법을 찾아서 스위치봇이 직구가 아닌 국내에 출시되었길래 낼름 구매해서 도전해봤습니다. 스위치봇 제품에 대한 내용이나 구매는  https://www.wakers.shop/  에서 하시면 됩니다. 저는 스위치봇에 스위치봇을 구글 홈에 연결시키기 위해 스위치봇 허브 미니까지 구매했습니다. 스위치봇 허브 미니가 없으면 스위치봇을 외부에서 제어하거나 구글 홈에 연결할 수 없습니다. 그리고 제가 스위치봇 허브 미니를 구매한 이유 중 다른 하나는 이 제품이 RF 리모컨 기능이 지원됩니다. 집에 있는 모니터를 제어할 필요가 있어서 이참 저참으로 같이 구매했습니다. 제품 등록은 어렵지 않습니다. 여기서는 스위치봇 허브 미니에 RF 리모컨을 등록해서 구글 어시스턴트로 제어하는 방법을 소개해드릴까 합니다. 제가 스위치봇 허브 미니로 모니터를 제어하고 싶었던 부분은 컴퓨터에서 크롬캐스트로 외부 입력을 때에 따라 바꿔야 하는데.. 그때마다 리모컨을 찾는게 너무 불편해서였습니다.  어차피 리모컨은 외부 입력 바꿀 때 빼고는 쓸 일도 없는지라.. 매번 어디로 사라지면 정말 불편해서 이걸 자동화 하고 싶었습니다. 그런데, 처음에 스위치봇 허브 미니를 등록하고 여기에 리모컨을 등록하니.. 구글 홈에 등록된 리모컨이 자동으로 등록이 됩니다. 그런데, 등록된걸 확인해보니 전원 On/Off만 제어되는 것이고, 나머지 버튼은 구글 홈...

내 인생 첫 차량 구매 후기 - 쉐보레 스파크

다사다난한 2011이 끝나고.. 2012년이 밝았군요.. 머.. 저는 언제나처럼 설날을 기준으로 하기 때문에 별다르게 주변 분들에게 새해 인사를 하거나 그러지는 않았습니다만.. TV고 어디고 간에 새해가 밝았다 하니 그런가 합니다.. 저는 어제 저녁 아내님이 2도 화상을 입으시는 바람에 송구영신 예배나 새해 맞이 예배는 가지도 못했고.. 그냥 한해의 액땜을 제대로 했구나 하고 있습니다. 오늘은 출장 가기 전에 체력 비축하고 있습니다... 아.. 그냥 방에서 뒹굴거리고 있습니다.. 간만에 좀 뒹굴거리는것 같네요.. 어쨌든 새해 첫날 먼가 참신한 글을 써보고 싶었지만.. 소재가 그렇게 뉴턴의 사과처럼 머리로 떨어져주는건 아니니.. 지난 해 진행했던 카드 소팅 결과는 참여하신 분들이나 기다려주시는 분들에게는 죄송하지만 조금만 더 기다려주시면 고맙겠습니다. 그래서 오늘의 소재는 써야지.. 써야지.. 하면서 차일 피일 미루던 제 인생 첫 차량 구매 후기를 올려보겠습니다. 제가 운전을 잘 하거나 차량에 대해 잘 알고 있는 것이 아니기 때문에 그냥 참고만 하시면 되겠습니다. 우선 제가 차량을 구매하게 된 동기는 .. 그렇습니다.. 애들 때문입니다. 자녀가 둘이 되니.. 엄마, 아빠의 팔뚝 힘으로는 더 이상 외출이 힘들어졌습니다. 그래서 차를 구매해야겠다고 무리를 하게 되었습니다만.. 역시 언제나 부족한 것은 총알이죠.. 그래서 당연히 경차로 알아보게 되었습니다. 하지만 아시다시피 우리 나라에 경차는 딱 두가지입니다.(지금은 레이라고 새로 나와서 세가지가 되었지만.. 제가 차를 구매할때는 두 종류였습니다.) 선택이라고 할것도 없죠.. 현대 차는 고객을 개새끼로 아는 현대의 투철한 정신에 절대 사고 싶지 않았고.. 쉐보레는 옛날 대우 생각을 하면 이것도 역시 사고 싶지 않았지만.. 여기 저기 얘기를 들어보니 쉐보레로 변하면서 차 좋아졌다.. 쉐비케어가 진리다.. 라는 얘기에.. 그냥 스파크 구매로 결정했습니다...