기본 콘텐츠로 건너뛰기

이해관계자에게 이쁨 받는 테스터가 되어보자.

테스트란 기술은 아무리 좋게 포장한다고 하더라도 다른 사람에게 있어서는 자신을 비방하며 괄시하는 기술로 보이는 것이 사실이다.

왜냐하면 결함이라는 것이 제품의 결함처럼 보이지만 실상은 그 제품을 만든 사람들의 실수를 지적하는 것이기 때문이다.

즉, 테스터는 결함보고서를 통해 누군가를 꾸짖는 사람이라고 볼 수 있다.

꾸짖음은 많은 경우 부정적인 측면을 만들기 마련이고, 그것을 좋아하는 사람은 많지 않다.

그만큼 결함을 보고한다는 작업은 참 하기 힘든 작업 중 하나이다.

하지만 누군가 그런 실수를 지적해주지 않는다면 결국 만들어진 제품은 비효율적이고 한단계 더 나은 단계로 발전할 수 있는 기회조차 잃어버리게 될 것이다.

그렇기 때문에 테스터가 갖춰야 할 덕목은 여러가지가 있지만 그 중 하나가 다른 사람을 잘 꾸짖는 법을 아는 것이 중요하다.

우리가 흔히 하는 실수 중 하나가 자신은 남보다 더 잘난 듯 말한다는 것이다. 남을 질책할 때 자신이 기준이나 표준인것처럼 얘기한다는 것이다. 더 재미있는 것은 다른 사람들은 얘기를 하고 있는 사람의 단점이나 결점을 알고 있는데도 그렇게 얘기한다는 것이다.

사정이 그렇게 되다보면 당연히 신뢰를 잃게 되는 것은 당연지사이다.

왜 이런 실수를 하는 것일까? 거기에는 오만과 우월감을 과시하고자 하는 우리의 작은 욕망 때문에 그런 것이다.

이런 실수를 극복하기 위해서는 우선 자신을 질책하는 것에 익숙해질 필요가 있다. 물론 자아비판이란 매우 하기 힘든 행동이다.

왜냐하면 우리는 자기 자신에게 무척 관대하기 때문이다.

때문에 더 좋은 방법은 남의 질책을 받아들이는 것이다. 남의 비판을 수용하고 그것을 수용할 수 있는 능력이 절실하다.

하지만 대부분의 사람들은 역시 비판을 좋아하지 않는다. 이로 인해서 발전 가능성을 손상시키고 결국에는 고만고만한 지극히 평범한 수준에 자신을 제한해 버린다.

이것이 우리 나라에 아이폰이나 아이패드와 같은 혁신적인 제품이 나오지 못하는 이유 중 하나라고 생각한다.

테스터가 제품의 혁신과 품질의 향상에 대한 이해관계자의 무관심, 무성의, 평범함을 제대로 비판하지 못했다는 결론이다.

질책이란 매우 중요한 활동이다. 질책은 장기적인 성공을 위해 반드시 필요한 행동이다.

그리고 질책이나 비판은 기술이다. 계속적으로 갈고 닦아야만 하는 기술이다.

혹자는 결함보고서 쓰는거는 쉽다고 생각하지만 결함보고서 작성 역시 테스터가 일평생 갈고 닦아야만 하는 기술인 것이다.

이러한 비판에는 몇가지 원칙들이 있다. 이러한 원칙들이 비판이라는 하나의 기술에 대한 든든한 주춧돌이 될 것이다.

원칙들을 살펴보면 아래와 같다.
  1. 자기 자신에게(자신의 부서와 조직에) 적용할 높은 기준을 수립해라.
  2. 자기 자신에게 엄격해라. 자기 자신을 끊임없이 비판하라.
  3. 질책과 비판은 믿을 수 있는 전문가에게 구해라.
  4. 전문가들의 질책과 비판을 겸허히 수용해라.
  5. 전문가들의 질책과 비판으로부터 배워라.
  6. 다른 사람을 질책하기 전에 자신에 대한 질책을 더 많이 받아들여라.
  7. 질책하고자 하는 분야에서 전문가가 되어라.
  8. 질책하기 전에 그들로부터 신뢰를 얻어라.
  9. 질책의 목적은 상대방을 돕는 것이 되어야 한다.
  10. 질책은 모든 사람들이 동의하고 수긍하는 높은 기준에 초점을 맞춰야 한다.
  11. 질책은 결코 개인적이어서는 안되며, 사람의 감정을 상하게 할 목적으로 해서는 안된다.(다른 사람의 감정, 자기 정체성, 자존심을 건들지 말아라.)
  12. 질책의 목적이 확연하고 명백하게 드러나야 한다. (결함보고서의 목적은 결함을 제거하는 긍정적인 결과에 도달해야 한다.)
  13. 모든 질책은 칭찬과 균형을 이루어야 한다.
이외에도 생각해 볼 수 있는 원칙들은 더 많을 수 있다.

하지만 중요한 것은 결함을 찾고 결함을 수정하도록 설득하는 작업은 절대 포기해서는 안되는 작업이라는 것이다.

댓글

이 블로그의 인기 게시물

피드백 루프: AI 시대 테스터가 지켜내야 할 핵심 엔진

소프트웨어 개발과 테스팅 현장에서 가장 자주 언급되지만, 막상 시스템이 복잡해질수록 쉽게 경시되곤 하는 핵심 개념이 바로 '피드백 루프(Feedback Loop)'입니다. 코드를 수정하고, 빌드하고, 테스트 결과를 확인하고, 다시 개선하는 그 순환 과정의 속도와 정확도가 결국 소프트웨어의 품질을 결정짓기 때문입니다. 품질 전문가 매슈 하이저(Matthew Heusser)가 자신의 블로그 Quality Remarks에 기고한 "One Loop After Another" 아티클은 바로 이 피드백 루프의 다층적 구조와, AI 시대에 우리가 놓치지 말아야 할 품질 검증의 본질을 날카롭게 되짚어 줍니다. (출처: Quality Remarks - One Loop After Another / Matthew Heusser) https://qualityremarks.com/one-loop-after-another/ 매슈 하이저는 소프트웨어 개발 생태계가 단순히 하나의 커다란 테스트 루프로 돌아가는 것이 아니라, 시간 축과 관점에 따라 겹겹이 쌓인 '연쇄적인 피드백 루프들(One Loop After Another)'로 이루어져 있다고 설명합니다. 초단기 루프 (Inner Loop): 개발자가 코드를 작성하는 몇 초~몇 분 단위의 루프입니다. 단위 테스트(Unit Test)나 IDE의 Linter, AI 자동 완성이 즉각적인 피드백을 주는 영역입니다. 단기 루프 (Daily / CI Loop): 커밋과 푸시가 이루어지고, CI/CD 파이프라인에서 통합 테스트와 정적 분석이 실행되는 몇 시간 단위의 루프입니다. 중기 루프 (Iteration / Exploration Loop): 스프린트 단위로 탐색적 테스팅(Exploratory Testing)을 수행하고, 실제 사용자 시나리오나 엣지 케이스를 사람이 직접 검증하며 시스템의 유기적 작동을 확인하는 며칠~몇 주 단위의 루프입니다. 장기 루프 (Outer / Market Loop): 실제 ...

합성 사용자(Synthetic Users)의 5가지 유형과 AI 테스팅 현장에서의 활용법

AI와 생성형 모델 기술이 발전하면서, 사용자 경험(UX) 연구와 테스팅 현장에서 가상 퍼소나를 활용해 테스트 데이터를 수집하거나 사용성을 평가하려는 시도가 급격히 늘고 있습니다. 이를 흔히 '합성 사용자(Synthetic Users)'라고 부릅니다. 하지만 막연히 "AI에게 사용자 역할을 시켜 테스트를 돌린다"고 할 때, 그 가상 사용자가 어떤 방식과 데이터로 생성되었는지 명확히 구분하지 않으면 자칫 왜곡된 결과에 빠질 위험이 있습니다. UX 및 사용성 리서치 분야의 권위 있는 기관인 MeasuringU에서 이 합성 사용자의 개념을 명쾌하게 분류한 아티클을 공개했습니다. 바로 "What Are the Different Types of Synthetic Users?"라는 글입니다. (출처: MeasuringU - What Are the Different Types of Synthetic Users? / Jeff Sauro, PhD & Jim Lewis, PhD) https://measuringu.com/what-are-the-different-types-of-synthetic-users/ Jeff Sauro와 Jim Lewis 박사는 합성 사용자를 단순히 하나의 개념으로 뭉뚱그리지 않고, 생성 기술의 근거와 데이터 기반에 따라 크게 5가지 유형으로 깔끔하게 정리해 줍니다. 첫째는 규칙 기반(Rule-Based) 합성 사용자입니다. AI 모델이 아니라 사전 정의된 조건문, 정규식, 시나리오 스크립트에 따라 움직이는 전통적인 형태의 가상 사용자입니다. 예측 가능하고 정확하지만, 인간 사용자의 복잡한 정서나 미묘한 변수를 반영하진 못합니다. Selenium, Playwright, K6 같은 도구를 통해 지정된 경로대로 버튼을 누르고 데이터를 입력하는 방식을 들 수 있습니다. 둘째는 퍼소나 기반 LLM(Persona-Based LLM) 합성 사용자입니다. 생성형 AI에게 "너는 50대 비테크놀로지 사용...

에이전틱 AI 프로젝트에서 테스터의 5가지 핵심 원칙

AI 코딩 에이전트와 자율형 에이전트가 빠르게 개발 워크플로우에 통합되면서, 단순히 코드를 잘 짜는 것을 넘어 '에이전트와 어떻게 협업하고 통제할 것인가'가 개발자와 아키텍트들의 가장 큰 화두로 떠올랐습니다. 윤석찬 님의 아티클 "AI 에이전트 시대, 개발자는 어떻게 일해야 하는가? – 프론티어 엔지니어링의 10가지 원칙"은 에이전틱 AI 시대에 엔지니어가 마주하는 패러다임 변화와, 실무 현장에서 일하는 방식을 어떻게 재정의해야 하는지 아주 명확한 가이드라인을 제시해 줍니다. (출처: channy.creation.net - 윤석찬 님의 블로그) https://channy.creation.net/blog/1989 비록 대규모 에이전트 오케스트레이션이나 초거대 인프라 시스템을 개인이 직접 구축하고 운용하는 것은 비용적·기술적으로 현실적인 한계가 있습니다. 하지만 개인 프로젝트에서 AI와 바이브 코딩(Vibe Coding)을 활용하며 겪었던 맥락 손실, 환각, 통제 불능의 경험들을 떠올려보면, 이 아티클이 제시하는 10가지 프론티어 엔지니어링 원칙은 소규모 개인 개발 환경에서도 대단히 깊은 공감을 불러일으킵니다. 이 글은 단순히 "AI 도구를 잘 쓰자"는 수준에 머무르지 않습니다. AI 에이전트가 생성해내는 불확실성 속에서 인간 엔지니어가 시스템의 맥락을 주도하고, 오작동을 제어하며, 품질의 키(Steering Wheel)를 쥐기 위한 구조적 사고법을 다룹니다. 그렇다면 프론티어 엔지니어링의 원칙을 바탕으로, 시스템의 신뢰성과 안전성을 검증해야 하는 테스터는 과연 어떤 실무 원칙을 세워나갈 수 있을까요? 윤석찬 님이 제시한 엔지니어링 원칙을 테스팅 관점으로 재해석해 보면, 다음과 같은 5가지 원칙으로 정리할 수 있을 것 같습니다. 1. 결정론적 검증에서 '경계선 및 허용 오차(Boundary)' 테스팅으로 전환하라 에이전트 기반 시스템은 같은 입력을 주어도 매번 다른 추론 경로를 거치는 확률적(Stoc...