Software Testing& Quality Report (소프트웨어 테스팅 & 품질 리포트) - 3RD EDITION by Testrail 테스트레일

QA 테스트도구인 테스트레일(Testrail)에서 나온 테스트관련 동향에 대한 리포트 문서가 있어 공유해본다. 
2023년까지의 자료를 기반으로 한 보고서라, 꽤 최신 트렌드를 반영한다고 볼 수 있어보인다. 

아래 링크로 들어가면 바로 pdf문서를 볼 수도 있고, 아래 다운받을 수 있게 파일첨부도 해두었다. 
https://content.testrail.com/hubfs/Downloadables/Third_Edition_Software_Testing_&_Quality_Report.pdf

 

Third_Edition_Software_Testing_&_Quality_Report.pdf

3.51MB

원문

Third_Edition_Software_Testing_&_Quality_Report.en.ko.pdf

5.18MB

한글 번역본

 

문서에서 알 수 있는 내용을 조금 발췌해왔다. 

내용을 훌어보면 많은 QA 종사자들이 비슷한 고민들을 하고 있다는 것을 알수가 있다. 
과연 다른 QA들도 나와 같은 고민을 하고 있을까? 우리 조직과 같은 생각을 할까? 에 대한 어느정도의 참고자료가 될 수 있을 것 같다. 

또한 최근 가장 큰 화두인 AI 와 테스트자동화에 대한 내용들도 있다. 

 

 

 

자동화에 대한 강조가 증가하고 있음에도 불구하고 수동 테스트는 QA 프로세스에서 계속해서 중요한 역할
을 하고 있으며, 응답자들은 전년도에 비해 수동 테스트가 증가했다고 밝혔습니다.

 

테스트 자동화를 위한 오픈 소스 프레임워크와 도구를 계속해서 선호하는 것으로 나타났습니다.
응답자의 44%는 Selenium을 사용하고 있으며 Cypress 자동화를 두 번째로 가장 많이 사용하는 도구로 꼽았으며 TestNG를 활용하는 Java 프레임워크가 그 뒤를 이었습니다.

우리 회사에서도 지라를 쓰고 있는데, 역시 버그관리툴의 대세는 지라... 

 

설문 조사 응답자의 대다수(22%)는 자신의 조직이 격주로 배포한다고 답했습니다.
주간 및 월간 릴리스 배포도 널리 퍼져 있으며 각각 응답의 18%를 차지합니다.
특히, 69%의 조직이 새 릴리스를 매달 또는 더 자주 배포하고 있습니다.

 

아래는 QA 조직과 관련한 설문 통계내용을 담고 있다. 

버그를 줄이는 것이 8.5점으로 최우선 과제로 나타났으며, 이는 제품 신뢰성을 향상하기 위한 지속적인 노력을 나타냅니다. 테스트 프로세스를 합리화하고 테스트 자동화를 확대한 결과 각각 8.2점과 8.0점을 획득하여 보다 효율적이고 자동화된 테스트 환경으로의 전환을 알렸습니다.

팀의 50%가 테스트 성공/실패율에 중점을 두며 테스트 노력의 즉각적인 성공을 평가하는 데 있어 중요성을 강조합니다. 응답자의 45%는 생산 과정에서 보고된 결함 수를 추적하는 데 우선순위를 두며 문제가 최종 사용자에게 영향을 미치기 전에 문제를 식별하는 것이 중요하다고 강조했습니다. 

운영 효율성과 효율성은 실행된 총 테스트 수를 추적하는 팀의 29%에서 더욱 잘 드러납니다. 
테스트 진행 상황, 테스트 주기 시간, 요구 사항 적용범위와 같은 기타 중요한 지표가 바로 뒤따릅니다.