기본 콘텐츠로 건너뛰기

테스터는 전체를 조화시킬 줄 알아야 한다.

테스트의 고수는 어떤 사람일까?

어떤 사람이 테스트를 잘 하는 사람일까?

기업은 어떤 사람을 테스터로 고용해야하는걸까?

뛰어난 테스터가 되기 위해서는 무엇을 알아야하는걸까?

위와 유사한 질문은 테스터로 시작하는 사람부터 테스터를 고용하는 사람들까지 많은 사람들이 공통적으로 가지고 있는 의문들입니다.

이와 관련한 많은 조언들이 있지만 나름 제 개인적인 의견을 적어볼까 합니다.

제 생각에

가장 하수의 테스터는 주어진대로 테스트를 하는 수동적 테스터입니다.

명세에 적혀 있는 내용만 확인하는 테스터, 제품이 정상 동작하는지에만 관심을 두고 집중하는 테스터입니다.

일반적으로 테스트를 이제 막 시작하시는 분들이 이런 테스트에 주력하고 테스트를 잘 모르는 개발 이해관계자들이 주력하는 테스트 유형입니다.

이보다 조금 더 높은 단계가 되면 실패하는 경우, 리스크를 고려하기 시작합니다.

제품이 실패할 수 있는 정황, 사용자의 실수 등을 고려하여 테스트를 하는 수준입니다.

그리고 이쯤 되면 많은 테스터들이 딜레마에 빠집니다.

얼마나 많은 경우를 고려해야하는 걸까? 이러한 테스트는 필요한 것일까? 환경? 예산? 사용자는 정말 이렇게 사용할까? 등등

이 수준이 되면 테스트를 완벽하게 하기 어렵다는 것을 깨닫고 많은 테스터들이 자포자기 심정으로 빠져들기도 합니다.

이보다 조금 더 높은 단계가 되면 전체적인 관점에서 제품을 바라보기 시작합니다.

예를 들면, 최고의 미녀를 만들기 위해서

얼굴형은 카라 구하라, 눈은 포미닛 현아, 코는 배우 이민정, 입술은 배우 윤은혜를 합쳐서 성형수술을 한다고 해봅시다.

가장 낮은 수준의 테스터는 얼굴형은 구하라처럼 되었는지, 코는 이민정과 얼마나 똑같은지, 입술은 윤은혜와 얼마나 똑같은지에만 초점을 맞춥니다.

중급 수준의 테스터는 각각의 경우에서 실패할 수 있는 경우, 시술을 받는 사람의 현재 상태 등을 고려하고 최적의 결과가 나올 수 있는 정황을 고려합니다.

하지만 이런 수준의 테스트를 거친다 하더라도 최종적인 모습은 그다지 이쁘지 않습니다. (물론, 개인적인 취향으로 충분히 이쁘다고 하시는 분도 계십니다.)

문제가 무엇인고 하니.. 말 그대로 조화가 빠져 있다는 것입니다.

상급 수준의 테스터는 각각의 가장 이쁜 부분을 합쳤을 때 전체적인 조화로움을 예측하고 그에 대한 의견을 낼 수 있어야 합니다.

소프트웨어 개발은 각종 이해관계자의 정치적인 알력과 의견의 잡탕이라고 할 수 있습니다.

누군가의 정치적인 힘이 큰 경우 많은 소프트웨어는 조화가 깨지고 괴물이 되어버립니다.

테스터는 그러한 상황에 제동을 가하고 팀이 올바른 방향으로 나아갈 수 있도록 등대가 되어줄 수 있어야 합니다.

그러기 위해서는 테스터는 조직에서 존중과 신뢰를 받을 수 있어야 합니다.

조직에서 테스터가 개발의 겉저리 수준으로 취급받는다면 그 조직에서 만들어지는 소프트웨어는 절대 좋을 수 없습니다.

우리가 좋은 소프트웨어를 만들기 위해서는 2가지가 필요합니다.

여러 이해관계자의 의견과 관점을 조율하고 전체적인 관점에서 조화시킬 수 있는 훈련되고 능력있는 테스터

그리고 그러한 테스터를 신뢰하고 존중하는 조직 문화..

그런 면에서 아직까지 우리 나라의 소프트웨어 개발 성숙도는 멀었다고 생각합니다.

댓글

  1. 품질 지표/기준을 적용하더라도 쉽게 측정 가능한 것들만 사용하는 것도 문제인 것 같습니다. 가장 흔히 사용되는 것이 결함 조치율이 아닐지...

    답글삭제

댓글 쓰기

이 블로그의 인기 게시물

안드로이드 오토에서 사용할 수 있는 지도 3종 초간단 리뷰

국내에 카카오 네비게이션과 함께 안드로이드 오토가 서비스 된지도 많은 시간이 지났습니다. 카카오 네비게이션 서비스가 2018년 7월 12일이었네요. ( https://murianwind.blogspot.com/2018/08/blog-post.html ) 시간이 흘러 흘러.. 하나의 국가에 하나의 네비게이션만 가능하다더니.. 작년 12월에 티맵이 베타 서비스를 시작하더니.. 얼마전에는 아이나비 에어도 베타 서비스를 시작했습니다. 그래서 현재 국내에서 안드로이드 오토에 3종류의 네비게이션을 사용할 수 있습니다. 사용자 입장에서는 선택의 폭이 넓어져서 좋은거죠.. 3가지 네비를 모두 사용해 본 간단한 후기를 남겨볼까 합니다. 1. 카카오 네비 장점:  차량 화면에서 지도 확대, 축소가 됩니다.  가장 먼저 서비스를 시작해서 가장 안정적이고 무난합니다. 다양한 안내 음성을 들을 수 있지만, 써본적은 없네요. 단점:  경로 안내 도중 주행 안내선에 현재 도로의 교통량이 표시되지 않습니다. 지도를 축소해야 보입니다. ㅡ.ㅡ 2. 티맵 장점:  미래의 특정 날짜의 이동 소요시간을 확인할 수 있습니다.  마일리지로 보험 할인 같은것을 받아볼 수 있습니다. 자신의 운전 습관, 경로 등을 자세하게 확인해볼 수 있습니다. 주행 안내선에 현재 도로 교통량이 표시됩니다. 단점:  광고.. 광고.. 광고..  그리고 안전 운전으로는 마일리지가 적립되지 않습니다. 경로 안내를 받아도 마일리지가 심심하면 적립되지 않습니다. 도착지에 도착했을 때 경로 안내 종료가 제대로 되지 않을때가 많습니다.  차량 화면에서 지도 확대, 축소가 지원되지 않습니다. 3. 아이나비 에어 장점:  심플합니다. 카툰 네비는 좀 특이하긴 합니다. 단점: 안내음성이 딸랑 2개 지도 정보가 오류가 많고 업데이트가 안되어 있습니다. 앱 아이콘이 안이쁩니다. 익스트림 에어 3D 지도 선택 시 경로가 제대로 보이지 않습니다. 이 지도 해상도가 생각보다 높지 않아서 지도에서 길이 제대로 보이지를 않습니다. 마일리지가 있긴

스위치봇 & 스위치봇 허브 미니 간단 사용기

제 블로그에 예전부터 오셨던 분들은 제가 사브작 사브작 홈 오토메이션을 어설프게 해온 것을 아실겁니다. 작년부터 너무 하고 싶었던 도어락 자동화에 도전해봤습니다. 우리 나라에 자체 서비스로 앱을 통해 도어락을 제어하는 제품은 꽤 있습니다. 게이트맨도 있고, 키위도 있고, 삼성도 있죠.. 그런데.. 전 그것보다 구글 어시스턴트를 지원하는 도어락이 필요했는데... 그런건 안만들더라구요.. 꼭 필요한건 아니지만 웬지 해보고 싶은데... 언제 제품이 출시될지도 몰라서.. 가능한 방법을 찾아보다가.. 스위치봇이라는 제품으로 도어락을 버튼을 꾹 누르는 방법을 찾아서 스위치봇이 직구가 아닌 국내에 출시되었길래 낼름 구매해서 도전해봤습니다. 스위치봇 제품에 대한 내용이나 구매는  https://www.wakers.shop/  에서 하시면 됩니다. 저는 스위치봇에 스위치봇을 구글 홈에 연결시키기 위해 스위치봇 허브 미니까지 구매했습니다. 스위치봇 허브 미니가 없으면 스위치봇을 외부에서 제어하거나 구글 홈에 연결할 수 없습니다. 그리고 제가 스위치봇 허브 미니를 구매한 이유 중 다른 하나는 이 제품이 RF 리모컨 기능이 지원됩니다. 집에 있는 모니터를 제어할 필요가 있어서 이참 저참으로 같이 구매했습니다. 제품 등록은 어렵지 않습니다. 여기서는 스위치봇 허브 미니에 RF 리모컨을 등록해서 구글 어시스턴트로 제어하는 방법을 소개해드릴까 합니다. 제가 스위치봇 허브 미니로 모니터를 제어하고 싶었던 부분은 컴퓨터에서 크롬캐스트로 외부 입력을 때에 따라 바꿔야 하는데.. 그때마다 리모컨을 찾는게 너무 불편해서였습니다.  어차피 리모컨은 외부 입력 바꿀 때 빼고는 쓸 일도 없는지라.. 매번 어디로 사라지면 정말 불편해서 이걸 자동화 하고 싶었습니다. 그런데, 처음에 스위치봇 허브 미니를 등록하고 여기에 리모컨을 등록하니.. 구글 홈에 등록된 리모컨이 자동으로 등록이 됩니다. 그런데, 등록된걸 확인해보니 전원 On/Off만 제어되는 것이고, 나머지 버튼은 구글 홈으로 제어가 안되어서..

테스트 케이스와 체크리스트의 차이가 뭐여?

테스트 실무에서 가장 혼돈되어 사용되는 용어 중 하나가 테스트 케이스와 체크리스트입니다. 많은 경우 체크리스트를 테스트 케이스로 사용하는 경우가 많습니다. 실제로 인터넷 커뮤니티나 블로그, ISO, IEEE, ISTQB 등등을 검색해보시면 테스트 케이스와 체크리스트에 대한 구분이 다 제각각입니다. 각각에 대한 정의가 다 제각각입니다. 사정이 이러하다보니 많은 사람들이 테스트 케이스와 체크리스트를 잘 구분하지 못하고 혼동해서 사용하는 경우가 많습니다. 물과 기름처럼 테스트 케이스와 체크리스트를 정확하게 구분할 수는 없겠지만.. ISTQB를 기준으로 말씀드리면 설계 기법을 통해 도출된 것은 테스트 케이스 그렇지 않은 것은 체크리스트라고 생각하시면 쉽습니다. 예를 들면 아래는 결정 테이블 테스팅 기법을 통해 도출된 테스트 케이스의 예제입니다. 실제 테스트 케이스는 위보다 복잡하겠지만 어쨌든 얘기하고 싶은 것은 위와 같이 설계 기법을 통해서 도출된 것은 테스트 케이스라고 합니다. 그런데 딱 보시면 아시겠지만 실제 테스트에서는 저 정도로는 테스트 커버리지를 충분히 만족했다고 얘기하기 힘듭니다. 그렇습니다. 어떤 분들은 테스트 케이스가 전가의 보도, 은 총알 쯤으로 생각하시는데.. 테스트 케이스는 일종의 마지노 선이라고 보시면 됩니다. 최소한 제품을 테스트 할때 이정도는 해줘야 한다는 최후의 방어선 정도라고 보시면 됩니다. 전쟁에서 최후의 방어선은 물러설 수 없는 마지막 보루입니다. 하지만 최후의 방어선만 지킨다고 전쟁에서 승리할 수는 없습니다. 프랑스는 마지노 요새만 믿고 있다가 독일에게 깔끔하게 발렸던 과거가 있지요. 전쟁에서 승리하려면 앞으로 나가야하고 치밀한 전략과 전술이 뒷받침 되어야 합니다. 더 높은 커버리지를 도달하고, 충분히 좋은 테스트가 수행되려면 테스트 케이스는 기본이 되어야 하고 거기에 더해서 체크리스트가 따라와 줘야 합니다. 이러한 체크리스트는 팀의 경험과 과거 프로젝트의 데이