기본 콘텐츠로 건너뛰기

소극장을 만들어라. - 관찰실과 관찰자

------------------------------------------------------------

1. 사용성 테스팅(Massive and Rapid Usability Testing)

 가. 사용성 테스팅의 정의

 나. Rapid Usbility Testing

 다. Massive Usability Testing vs. Rapid Usability Testing

2. 사용성 테스팅 계획(개발 수명주기에서의 사용성 테스팅)

 가. 사용성 테스팅은 언제 수행하나요?

3. 참가자 선정

 가. 사용성 테스팅에 얼마나 많은 참가자가 적당한가?

 나. 사용성 테스팅에서 사용자란 누구인가?

4. 사용성 테스팅 수행

 가. 사용자 테스팅
  - 사용자 테스팅 소개
  - 테스트 과제와 시나리오 작성
  - 관찰실
  - 테스트 진행
  - 회고 그리고 보고서
  - 체크리스트
  - 사용자 테스팅의 장점과 단점

 나. 카드 소팅

 다. 소원의 나무

5. 정리(?)

------------------------------------------------------------

사용자 테스팅은 한편의 아름다운 연극과 같습니다.

하지만 아무리 아름다운 연극이라고 해도 지켜보는 관객이 없다면 의미가 없을 것입니다.

마찬가지로 사용자 테스팅과 진행자와 참가자 못지 않게 중요한 사람들이 관찰자들입니다.

여러분이 사용자 테스팅을 하실 때에는 되도록 많은 관찰자들을 부르시기 바랍니다.

관리자, 개발자, 디자이너, 편집자, 카피라이터, 사장님을 포함한 임원진 등 제품 개발에 관련된 사람들이라면 누구든지 상관없습니다.

되도록 많은 사람들을 부르기 위해 할 수 있는 모든 것을 하시기 바랍니다.

되도록 많은 사람들을 초대하기 위한 방법 중 아래와 같은 방법들은 좋은 효과가 있습니다.

1. 사장님을 포함한 임원진들을 모셔라!!
그렇습니다. 경영진이 잠깐이라도 참여를 하게 된다면 보다 많은 사람들이 테스트에 관심을 가지게 됩니다.
그리고 테스트를 무시하기 힘들게 됩니다.
경영진의 참석은 다른 사람들을 테스트에 참여하도록 설득하기 가장 쉬우면서도 가장 강력한 방법 중 하나입니다.
단점은 경영진의 참여를 이끌어내는 것이 어렵다는 것입니다.

2. 빵빵한 간식을 제공한다.
사람들은 은근히 먹을것에 취약합니다. 고급스런 간식과 점심을 보장한다면 많은 사람들이 올 수 있을 겁니다.
언제 만들었는지 모를 김밥이나 정성이라고는 눈꼽만치 없는 피자나 햄버거 보다는 커피 전문점의 상큼한 케익 한조각에 홍차 한잔의 간식은 천양지차입니다.

3. 사람들이 참여하기 쉬운 시간으로 정한다.
되도록이면 테스트 날짜를 그 주의 또는 그 달의 가장 한가한 시간으로 정하시기 바랍니다.
게임회사라면 업데이트가 몰리는 매월 말일과 같은 지옥과 같은 시간을 피하시기 바랍니다.

그 외에도 여러분이 생각할 수 있는 가능한 방법들을 동원하여 되도록 많은 사람들이 참여할 수 있도록 독려하시기 바랍니다.

그렇다면 사용자 테스팅에 참여하는 관찰자들은 어떤 일을 하게 될까요?

관찰자들이 하는 일은 간단합니다.

1. 참가자의 행동을 보고 참가자의 생각을 듣고 필요한 내용을 받아 적습니다.
2. 하나의 세션이 끝나고 나면 자신이 생각하는 가장 심각한 문제점 3개를 골라 적습니다.
3. 진행자가 참가자에게 했으면 하는 질문을 제안합니다.
4. 간신을 맛있게 먹습니다.
5. 회고를 위한 점심 식사에 참가합니다.

간단합니다. 이게 전부입니다.

관찰자로 초대하고 싶은 사람이 참가에 부담을 느낀다면 전혀 어려운 일은 없으며, 오셔서 맛있는 간식과 함께 연극 또는 영화 한편을 본다고 생각하시면 된다는 점을 강조하시면 됩니다.

아래는 관찰자들에게 제공하는 안내문 예시입니다.


다음은 관찰자들이 사용자 테스트를 관찰할 관찰실입니다.

관찰실은 일반적으로 회의실을 사용하시면 됩니다.

만약 참가하는 관찰자들이 정말 많다면 강당이나 소극장등을 사용하셔도 됩니다.

인터넷이 제공되고 빔 프로젝트가 있으며, 참가자의 음성을 들을 수 있는 곳이라면 어디든 상관 없습니다.

다만 한가지 고려할 점은 이전에도 얘기한 것처럼 테스트실과 관찰실이 물리적으로 같은 공간안에 있지 않도록 하는 것이 좋다는 것입니다.

이유는 여러가지가 있지만 참가자의 행동에 관찰자들이 소리내어 웃거나 비난하는 경우 참가자가 상처를 받을 수도 있으며, 많은 관찰자들은 참가자와 이야기 하기 위해 무던히도 애를 쓰기 때문입니다.

절대로 관찰실의 관찰자들이 테스트실의 위치를 알지 못하도록 해야하며, 두 공간이 같은 공간에 있지 않도록 주의하시기 바랍니다.

관찰실에는 다음과 같은 장비들이 구비되어야 합니다.

1. 인터넷 접속이 가능하고 화면 공유 소프트웨어가 설치된 컴퓨터
2. 빔 프로젝터(아니면 엄청 큰 텔레비젼)
3. 스피커(소리만 잘 나오면 됩니다. 5.1 채널 스피커 같은 고가의 장비는 있으면 좋겠지만 필수는 아닙니다.)
4. 빵빵한 간식!! (이것은 정말 중요한 것입니다. 베이글이나 머핀과 커핀 한잔이면 충분하다. 만약 관찰실에 있는 사람들이 즐겨 먹는 간식이 있다면 그것도 좋은 선택이 될 것입니다. Jolt Coke 한 캔이면.. 오우~~)
5. 스피커폰 또는 메신저(테스트실과 연락하기 위해서 필요합니다. 저는 화면 공유 소프트웨어가 같이 제공되는 스카이프를 즐겨 사용합니다.)

관찰실이 준비되었다면 이제 관찰실에서 관찰자들을 통제하고 안내하고 도와줄 관찰실 모니터링 요원이 필요합니다.

관찰실 모니터링 요원은 당신의 동료 중 가장 믿을만하고 친한 사람 중 한사람에게 부탁하시면 됩니다.

아래는 관찰실 모니터링 요원을 위한 안내문입니다.


위의 안내문에 적힌 내용 외에 관찰실 모니터링 요원이 수행해야할 가장 중요한 활동이 있습니다.

그것은 각 세션이 끝나고 관찰자들이 제출하는 가장 심각한 사용성 문제 3가지를 정리하는 작업입니다.

이 작업은 절대 간단한 작업이 아닙니다.

예를 들어 관찰실에 20명의 관찰자가 참여한다면 한 세션당 무려 60개의 사용성 문제가 제출될 것입니다.

이렇게 3개의 세션이 진행되면 전체 사용성 문제는 무려 180개나 됩니다. 이 많은 의견들을 취합하고 같은 내용을 분류하여 정리를 하는 일은 결코 간단하지 않습니다.

원활한 회고 진행을 위해서는 관찰실 모니터링 요원이 회고가 시작되기 전에 이 작업을 끝마칠 필요가 있습니다.

때문에 관찰실 모니터링 요원을 지정하실 때에는 타자가 눈이 부실만큼 빠르고 데이터 정리를 잘하는 사람을 뽑으시는 것도 좋은 방법입니다.

이런 이유로 사용자 테스트에는 되도록 많은 관찰자가 참여하는 것이 좋지만 참여하는 관찰자의 수를 제한하기도 합니다. 저는 개인적으로 10~20명 정도의 관찰자를 추천해 드립니다.

아니면 관찰실 모니터링 요원을 2명 이상 운용하시는 방법도 있습니다.

이제 테스트 과제와 시나리고 그리고 관찰실과 테스트실의 준비가 끝나셨다면 다음은 실제 테스트 진행입니다.

다음 포스트에는 실제 테스트를 진행하는 부분에 대해서 다루도록 하겠습니다.

댓글

이 블로그의 인기 게시물

스위치봇 & 스위치봇 허브 미니 간단 사용기

제 블로그에 예전부터 오셨던 분들은 제가 사브작 사브작 홈 오토메이션을 어설프게 해온 것을 아실겁니다. 작년부터 너무 하고 싶었던 도어락 자동화에 도전해봤습니다. 우리 나라에 자체 서비스로 앱을 통해 도어락을 제어하는 제품은 꽤 있습니다. 게이트맨도 있고, 키위도 있고, 삼성도 있죠.. 그런데.. 전 그것보다 구글 어시스턴트를 지원하는 도어락이 필요했는데... 그런건 안만들더라구요.. 꼭 필요한건 아니지만 웬지 해보고 싶은데... 언제 제품이 출시될지도 몰라서.. 가능한 방법을 찾아보다가.. 스위치봇이라는 제품으로 도어락을 버튼을 꾹 누르는 방법을 찾아서 스위치봇이 직구가 아닌 국내에 출시되었길래 낼름 구매해서 도전해봤습니다. 스위치봇 제품에 대한 내용이나 구매는  https://www.wakers.shop/  에서 하시면 됩니다. 저는 스위치봇에 스위치봇을 구글 홈에 연결시키기 위해 스위치봇 허브 미니까지 구매했습니다. 스위치봇 허브 미니가 없으면 스위치봇을 외부에서 제어하거나 구글 홈에 연결할 수 없습니다. 그리고 제가 스위치봇 허브 미니를 구매한 이유 중 다른 하나는 이 제품이 RF 리모컨 기능이 지원됩니다. 집에 있는 모니터를 제어할 필요가 있어서 이참 저참으로 같이 구매했습니다. 제품 등록은 어렵지 않습니다. 여기서는 스위치봇 허브 미니에 RF 리모컨을 등록해서 구글 어시스턴트로 제어하는 방법을 소개해드릴까 합니다. 제가 스위치봇 허브 미니로 모니터를 제어하고 싶었던 부분은 컴퓨터에서 크롬캐스트로 외부 입력을 때에 따라 바꿔야 하는데.. 그때마다 리모컨을 찾는게 너무 불편해서였습니다.  어차피 리모컨은 외부 입력 바꿀 때 빼고는 쓸 일도 없는지라.. 매번 어디로 사라지면 정말 불편해서 이걸 자동화 하고 싶었습니다. 그런데, 처음에 스위치봇 허브 미니를 등록하고 여기에 리모컨을 등록하니.. 구글 홈에 등록된 리모컨이 자동으로 등록이 됩니다. 그런데, 등록된걸 확인해보니 전원 On/Off만 제어되는 것이고, 나머지 버튼은 구글 홈...

프로젝트의 3요소 - Project Management

프로젝트는 예산, 일정, 품질 3가지 요소로 이루어진다고 볼 수 있다. 물론 위 3가지 요소 외에도 개발 범위, 팀워크, 자원 조달 등 여러가지 요소들도 고려해 볼 수 있지만, 가장 중요한 요소를 꼽는다면 예산, 일정, 품질일 것이다. 위에서 말한 여러가지 요소들은 프로젝트를 계획하여 완료하는 순간까지 복합적으로 작용해서 프로젝트의 성과를 제한하게 된다. 위의 요소들을 잘 통제한다면 성공적인 프로젝트가 되는 것이고 그렇지 못한다면 실패하거나 사라지게 될 것이다. 프로젝트 관리란 그런 면에서 제한된 자원을 가지고 목적한 바를 제한된 기간내에 최소의 비용으로 완수할 수 있도록 하는 것으로 정의할 수 있을 것이다. 이것을 도식화 한다면 아래와 같은 그림으로 표현할 수 있을 것이다. 위의 그림에 보는 것처럼 일정과 품질, 예산은 우리의 프로젝트가 목적하는 바를 달성하도록 하기 위해 상호 연관되어 작용하게 된다. 우리가 접하게 되는 많은 방법론들의 가정에는 위의 요소들을 어떻게 관리할 것인가에 대한 기본적인 가정들이 설정되어 있다. 조직에서 어떤 특정한 방법론을 도입한다는 것은 그런 가정에 동의하는 것이고 그러한 철학을 받아들인다는 것이기 때문에, 방법론을 채택하기 전에 조직의 근본 문제와 문화에 대해 점검해 볼 필요가 있다. 그리고 위의 요소들 외에 고려해 볼 사항은 위의 요소들은 변동성과 불확실성을 내포하고 있다는 것이다. 특히 비용과 예산, 목적은 프로젝트를 진행하면서 가변할 가능성이 매우 큰 요소들이다. 대부분의 방법론은 이러한 변동성에 대한 안전장치들을 가정해서 세워져 있다. 변동성의 측면에서 위의 요소들을 다시 살펴본다면 아래와 같이 가정할 수 있다. 위의 그림을 일부 해석해 본다면 일정이 늘어난다면 비용은 늘어나게 된다. 범위가 변경되어도 비용은 늘어나게 된다. 범위와 일정은 상호 의존적이 된다. 만약 위 3가지 요소의 변동성을 통제하지 못하게 된다면 프로젝트는...

쉘리로 지역난방 배관 온도 측정하기

  간헐 난방을 위해서 지역 난방의 배관 온도를 측정할 필요성을 느끼고.. 이런 저런 방법을 찾다가.. 쉘리의 온도 센서 애드온으로 작업하기로 결정하고 제품 구매 후 설정한 후기를 작성해봅니다. 어떤 분들은 기존의 직비 온도 센서를 테이프 돌돌 감아 측정하시던데.. 아무래도 정확성이 떨어질것 같아서 배관에 직접 닿을 수 있는 온도 센서를 구매해서 작업해봤습니다. 우선 준비물이 있어야 할텐데.. 쉘리 유럽에서 물건을 주문하면 언제 올지 도무지 기약을 할 수 없을 정도로 배송 속도가 들쭉날쭉하고 제대로 트래킹도 되지 않습니다. 그래서 알리에 있는 쉘리 공식 판매점에서 구매하시길 권장해드립니다. 우선 쉘리 1이 필요합니다. 비싼거 없이 싼거로 구현해도 문제가 없기 때문에 가장 저렴한 쉘리 1을 이용하겠습니다. 원하시면 쉘리 1PM을 이용하셔도 됩니다. https://ko.aliexpress.com/item/1005002716450669.html?spm=a2g0o.store_pc_home.0.0.412740ddSkjgfV 다음에 온도 센서 애드온이 필요합니다. https://ko.aliexpress.com/item/1005003292330909.html?spm=a2g0o.store_pc_groupList.8148356.1.62be201681ZJj9 이걸 구매하시면 되는데.. 유럽에서는 옵션으로 온도 센서를 2개나 3개로 선택할 수 있는데.. 여기서는 온도센서 하나밖에 선택이 안됩니다. 고로 네이버 쇼핑이든 다나와든 저렴하게 구매하실 수 있는 곳에서 취향껏 DS18B20을 추가로 구매해주셔야 합니다. 알리에서 검색해서 합배송 받는 방법도 있겠네요.. (합배송이 되는지는 모르겠습니다.) 기본적으로 입수관과 출수관의 온도를 측정해야 하기 때문에 하다 더 구매하셔야 하고.. 원하시는 곳에 하나 더 연결해서 총 3개의 온도 센서를 연결할 수 있습니다. 그 다음에 쉘리 1에 220V 전원을 공급해서 사용하셔도 되고.. 원하시면 12V나 24 – 60V에 해당하는 어댑터...