기본 콘텐츠로 건너뛰기

1등만 기억하는 더러운 세상 - 테스팅도 기억되고 싶다!

세간에 떠도는 자조섞인 말 중에 가장 많이 회자되는 말 중 '1등만 기억하는 더러운 세상' 이란 말이 있다.

최초, 최고, 1등.. 우리가 기억하는 사건, 사고, 인물 중 많은 부분에는 저런 수식어가 붙어 있다.

신문과 같은 언론에도 무슨 사건만 터졌다 하면 1등, 최초, 최고라는 수식어가 꼭 따라붙는다.

그런데 이런 현상이 소프트웨어 개발에도 마찬가지인것 같다.

일반적으로 소프트웨어 개발은 요구사항 수집, 설계, 구현, 테스트와 같은 단계를 거친다고 알려져 있다.(실제 그런 경우는 그리 많지 않다고 본다.)

어쨌든, 순서상 테스트는 맨 마지막이다.. 그렇다.. 맨 마지막이라서 아무도 기억하지 못하나 보다..

요구분석이나 설계, 구현과 같은 단계는 언제나 사람들의 많은 관심을 받는다. 대학교에서는 4년 내내 가르치기도 한다.(실제로 이번 SW Testing Camp 를 준비하면서 일선 대학의 테스팅에 대한 인식이 얼마나 바닥인지 절실히 느낄 수 있었다.)

그리고 각각의 단계를 지원하는 자동화 도구 역시 차고도 넘친다.

하지만 테스트는 어떤가? 가르치는 대학도 없다.(없지는 않다. 있기는 하지만 독립된 과목으로 가르치지는 않는다. 더구나 4년 내내 테스트만 가르치는 것도 아니다. 최근 국내에서 일부나마 석사과정에 포함되는 소기의 성과도 있었지만.. 아직은 갈길이 먼것만 같다.)

테스트 자동화를 지원하는 도구 역시 많지만 그다지 관심들이 없다. 물론 잘 사용되지도 않는다.

실제적으로 정적 테스팅 지원 도구(테스트 커버리지 분석기와 같은) 등은 단위 테스트를 수행함에 있어 필수 도구인 것은 사실이다.(하지만 여전히 많은 조직에서는 사용조차 하지 않는다.)

왜 이런 필수적인 도구조차 관심을 받지 못하고 사용되지 않는 것일까?

확실한건 테스트가 다른 개발 단계에 비해 확실히 관심을 덜 받고 있다는 것이다. 많은 사람들이 테스팅의 중요성에 대해 심각하게 고민하지 않는다.

그리고 테스팅을 수행하고 결함을 수정하는 작업은 힘들고 지루하다는 것도 이유가 아닐까?

설계나 개발은 무엇인가를 만든다는 재미와 창조적인 작업이라는 뭔지 모를 후광을 업고 있지만 테스팅은 기본적으로 파괴적인 행위로 사람들은 파괴적인 행위를 무의식적으로 거부하고 싫어하는 경향이 있다.

그리고 이전에도 계속 얘기했던 데드라인의 문제가 있다. 데드라인이 저 멀리 있을 때 사람들은 여유를 부린다. 하지만 데드라인이 코앞에 닥치면 이야기가 달라진다.

가장 중요한 우선순위는 구현 그리고 출시가 된다. 테스팅에 대한 관심은 자연히 사라진다.

테스팅은 대충 하거나 아예 하지 않는 경우가 생기는데.. 이것을 그냥 당연하게 여긴다.

그렇다면 이렇게 무관심속에 방치된 테스팅에 대해 사람들의 관심을 불러일으킬 수 있는 방법에는 무엇이 있을까?

최근에 많은 곳에서 초기 테스팅이나 테스트 주도 개발에 관련된 이야기를 하고 있다.

솔직히 이러한 개념은 아주 많이 보급되고 최근에는 아주 당연한 것처럼 얘기되지만 이 역시 실제적으로 도입되는 곳은 많지 않다.

왜 그런 것일까?

내 생각에는 비용 문제이다. 요구사항 단계부터 리뷰를 통한 테스팅이나 구현 단계에서 테스팅을 수행하는 것이 전체 개발 비용에서 결함 수정 비용을 획기적으로 줄여줄 수 있다는 데에는 아무도 이의를 제기하지 않는 사실로 받아들여지고 있다.

하지만 그런 결함 수정 비용이 테스팅을 개발 말미에 진행하는 것보다 초기에 테스팅을 수행함으로써 획기적으로 줄어들었다는 것은 프로젝트가 끝나봐야 알 수 있는 사실이다.

줄어들것인지 줄어들지 않을 것인지 알 수 없는 상황에 기존보다 개발 초기에 더 많은 인원과 예산을 투입하는데 선뜻 나설 수 있는 용기 있는 사람이 과연 몇이나 될까? 그런 조직이 과연 얼마나 많을까?

테스팅도 대접 받고 기억되는 세상에서 살고 싶다. 문제는 알겠지만 해결 방법은 쉽지 않다.

우리는 언제쯤 테스팅도 개발만큼 대접받고 기억되는 세상에서 살 수 있는 것일까?


댓글

  1. 어디서 큰 사건 하나 터지면 조금 더 관심을 갖게 되겠죠.(물론 시간이 지나면 다시 되돌아 가겠지만)



    소프트웨어가 아닌 일반 공장의 경우 품질이 매우 중요하게 생각되는 것으로 알고 있습니다.

    하지만 이것도 처음부터 그런 것은 아니고 6시그마를 비롯해서 많은 노력을 했고 결과물이 나온 결과겠죠.



    앞으로 뮤리안님 같은 분들이 많이 노력해서 선구자의 길을 ^^

    답글삭제

댓글 쓰기

이 블로그의 인기 게시물

피드백 루프: AI 시대 테스터가 지켜내야 할 핵심 엔진

소프트웨어 개발과 테스팅 현장에서 가장 자주 언급되지만, 막상 시스템이 복잡해질수록 쉽게 경시되곤 하는 핵심 개념이 바로 '피드백 루프(Feedback Loop)'입니다. 코드를 수정하고, 빌드하고, 테스트 결과를 확인하고, 다시 개선하는 그 순환 과정의 속도와 정확도가 결국 소프트웨어의 품질을 결정짓기 때문입니다. 품질 전문가 매슈 하이저(Matthew Heusser)가 자신의 블로그 Quality Remarks에 기고한 "One Loop After Another" 아티클은 바로 이 피드백 루프의 다층적 구조와, AI 시대에 우리가 놓치지 말아야 할 품질 검증의 본질을 날카롭게 되짚어 줍니다. (출처: Quality Remarks - One Loop After Another / Matthew Heusser) https://qualityremarks.com/one-loop-after-another/ 매슈 하이저는 소프트웨어 개발 생태계가 단순히 하나의 커다란 테스트 루프로 돌아가는 것이 아니라, 시간 축과 관점에 따라 겹겹이 쌓인 '연쇄적인 피드백 루프들(One Loop After Another)'로 이루어져 있다고 설명합니다. 초단기 루프 (Inner Loop): 개발자가 코드를 작성하는 몇 초~몇 분 단위의 루프입니다. 단위 테스트(Unit Test)나 IDE의 Linter, AI 자동 완성이 즉각적인 피드백을 주는 영역입니다. 단기 루프 (Daily / CI Loop): 커밋과 푸시가 이루어지고, CI/CD 파이프라인에서 통합 테스트와 정적 분석이 실행되는 몇 시간 단위의 루프입니다. 중기 루프 (Iteration / Exploration Loop): 스프린트 단위로 탐색적 테스팅(Exploratory Testing)을 수행하고, 실제 사용자 시나리오나 엣지 케이스를 사람이 직접 검증하며 시스템의 유기적 작동을 확인하는 며칠~몇 주 단위의 루프입니다. 장기 루프 (Outer / Market Loop): 실제 ...

에이전틱 AI 프로젝트에서 테스터의 5가지 핵심 원칙

AI 코딩 에이전트와 자율형 에이전트가 빠르게 개발 워크플로우에 통합되면서, 단순히 코드를 잘 짜는 것을 넘어 '에이전트와 어떻게 협업하고 통제할 것인가'가 개발자와 아키텍트들의 가장 큰 화두로 떠올랐습니다. 윤석찬 님의 아티클 "AI 에이전트 시대, 개발자는 어떻게 일해야 하는가? – 프론티어 엔지니어링의 10가지 원칙"은 에이전틱 AI 시대에 엔지니어가 마주하는 패러다임 변화와, 실무 현장에서 일하는 방식을 어떻게 재정의해야 하는지 아주 명확한 가이드라인을 제시해 줍니다. (출처: channy.creation.net - 윤석찬 님의 블로그) https://channy.creation.net/blog/1989 비록 대규모 에이전트 오케스트레이션이나 초거대 인프라 시스템을 개인이 직접 구축하고 운용하는 것은 비용적·기술적으로 현실적인 한계가 있습니다. 하지만 개인 프로젝트에서 AI와 바이브 코딩(Vibe Coding)을 활용하며 겪었던 맥락 손실, 환각, 통제 불능의 경험들을 떠올려보면, 이 아티클이 제시하는 10가지 프론티어 엔지니어링 원칙은 소규모 개인 개발 환경에서도 대단히 깊은 공감을 불러일으킵니다. 이 글은 단순히 "AI 도구를 잘 쓰자"는 수준에 머무르지 않습니다. AI 에이전트가 생성해내는 불확실성 속에서 인간 엔지니어가 시스템의 맥락을 주도하고, 오작동을 제어하며, 품질의 키(Steering Wheel)를 쥐기 위한 구조적 사고법을 다룹니다. 그렇다면 프론티어 엔지니어링의 원칙을 바탕으로, 시스템의 신뢰성과 안전성을 검증해야 하는 테스터는 과연 어떤 실무 원칙을 세워나갈 수 있을까요? 윤석찬 님이 제시한 엔지니어링 원칙을 테스팅 관점으로 재해석해 보면, 다음과 같은 5가지 원칙으로 정리할 수 있을 것 같습니다. 1. 결정론적 검증에서 '경계선 및 허용 오차(Boundary)' 테스팅으로 전환하라 에이전트 기반 시스템은 같은 입력을 주어도 매번 다른 추론 경로를 거치는 확률적(Stoc...

에이전틱 AI 시대에 테스팅은?

 "소프트웨어 엔지니어링은 과연 끝난 것일까?" 최근 AI 코딩 에이전트와 바이브 코딩(Vibe Coding)의 급부상 속에서, 엔지니어들과 아키텍트들이 스스로에게 던지는 가장 뼈아픈 질문입니다. 이 질문에 대해 기술 현장의 날카로운 시선을 담은 이원국 님의 아티클 "소프트웨어 엔지니어링의 종말"과 arXiv 논문 "Agentic Software: How AI Agents Are Restructuring the Software Paradigm"은 아주 근본적인 패러다임의 변화를 짚어내고 있습니다. (출처: blog.wonkooklee.com - 소프트웨어 엔지니어링의 종말) https://blog.wonkooklee.com/blog/20260913_02/ (출처: arXiv - Agentic Software: How AI Agents Are Restructuring the Software Paradigm) https://arxiv.org/html/2606.05608v2 이원국님의 아티클과 논문에서 공통적으로 말하는 핵심은, 우리가 알고 있던 '인간이 직접 코드를 다듬고 작성하던 전통적 소프트웨어 엔지니어링'의 정체성은 종말을 고하고 있으며, 그 자리를 '에이전트 패러다임(Agentic Paradigm)'이 빠르게 대체하고 있다는 사실입니다. arXiv 논문 "Agentic Software"에서는 소프트웨어 구축의 단위가 단순히 결정론적(Deterministic) 알고리즘이나 코드에서, 목표를 스스로 자율 추론하고 도구를 호출하며 과업을 완수하는 'AI 에이전트 오케스트레이션'으로 이동하고 있음을 말하고 있습니다. 이제 개발자는 시스템의 메서드나 API 하나하나를 직접 타이핑하는 존재가 아닙니다. AI 에이전트가 코드를 생성하고, 실행하고, 테스트를 돌리고, 스스로 디버깅하는 일련의 자율 루프(Autonomous Loop)를 설계하는 '시스템...