인공지능(AI)/AI test

[testsprite] Saucedemo 하나만 던져줬는데 AI가 로그인부터 결제까지 완벽 테스트한 이유

testmanager 2026. 5. 20. 08:06
반응형

 
URL과 아이디 하나만 입력했더니 테스트 설계, 실행, 18개 유저 시나리오 검증, 동영상 녹화까지 자동으로 끝냈다. 

 

실제 테스트 에이전트가 Saucedemo 사이트를 어떻게 탐색하고 분석했는지, 현업 QA 관점에서 자세히 풀어본다.

---

테스트 에이전트에게 https://www.saucedemo.com/ 주소와 standard_user 하나만 넘겨줬다. 

 

그런데 돌아온 결과물을 보고 잠시 말을 잃었다.

 

시험보고서



로그인 페이지부터 시작해 제품 목록, 상세 페이지, 장바구니, 결제 1단계까지 자연스럽게 흘러가는 사용자 여정을 에이전트가 처음부터 끝까지 직접 걸었다. 

 

 

단순히 클릭 몇 번 한 수준이 아니었다. 각 페이지의 목적을 파악하고, 주요 UI 요소를 인식하며, 실제 구매 흐름을 따라 움직였다.

 

사이트 탐색

 



특히 인상적이었던 부분은 문제 해결 중심의 탐색이었다.

 

standard_user로 로그인한 뒤 Sauce Labs Backpack 제품을 클릭해 상세 페이지로 이동하고, 다시 목록으로 돌아오는 동작을 자연스럽게 수행했다.

 

장바구니 아이콘을 통해 카트로 이동한 뒤 결제 버튼을 눌러 배송 정보 입력 단계까지 도달하는 과정이 일사천리였다.

 

 

 


에이전트는 18개의 테스트 케이스를 스스로 설계하고 실행했다.  

 


로그인 성공 경로, 제품 추가와 장바구니 배지 업데이트, 빈 장바구니 표시, 결제 양식 유효성 검사, 취소 버튼 동작 등 핵심 구매 흐름을 빠짐없이 검증했다. 

 

에이전트 액션

 

 

모든 케이스가 통과됐다는 보고서와 함께 각 단계별 녹화 영상까지 제공됐다.

더 놀라운 점은 단순 통과/실패를 넘어 관찰 내용을 구체적으로 기록했다는 것이다.

 

통합테스트

 

체크아웃 스텝원 페이지에서 이름, 성, 우편번호 필드의 특성을 정확히 파악하고, 제출 버튼 활성화 조건까지 분석했다.

 

재고 페이지의 정렬 드롭다운, 버거 메뉴, 제품 카드 클릭 등 세부 인터랙션도 놓치지 않았다.

이 결과물을 보면서 느낀 것은, 이제 테스트 설계와 실행의 문턱이 상당히 낮아졌다는 점이다. 

 

최소한의 정보만으로도 AI 에이전트가 애플리케이션의 구조를 이해하고, 의미 있는 유저 시나리오를 만들어 검증할 수 있게 됐다. 

 

특히 Saucedemo처럼 의도된 결함이 있는 데모 사이트를 테스트할 때, problem_user 같은 특수 계정까지 고려한 추가 탐색을 기대하게 된다.

 

Authentication(로그인 ID/PW)




이번 테스트에서는 명확한 버그가 발견되지 않았지만, 그 자체가 중요한 인사이트였다. 

 

핵심 구매 경로가 안정적으로 동작한다는 확신을 빠르게 얻을 수 있었기 때문이다. 

 

앞으로 실제 프로젝트에서 회귀 테스트나 신규 기능 검증에 활용한다면 상당한 시간을 절약할 수 있을 것 같다.

테스트 에이전트가 보여준 이번 탐색은 단순 자동화가 아니라, 애플리케이션을 ‘이해’하려는 지능형 접근이었다. 

 

URL 하나로 시작해 완성도 높은 테스트 보고서까지 만들어 내는 과정을 지켜보니, 앞으로의 QA 업무 방식이 꽤 달라질 것이라는 예감이 강하게 든다.



https://testmanager.tistory.com/556

 

URL만 넣으면 QA 끝? AI가 직접 짜고 실행하는 자율 테스팅 도구 Best 5 (웹 & 모바일)"

1. 테스트의 패러다임이 바뀐다: "AI 자율 테스팅"이란?과거에는 테스터가 기획서를 보고 일일이 테스트 케이스를 엑셀에 적고, Selenium이나 Appium 같은 도구로 코드를 짜야 했습니다. 하지만 이제

testmanager.tistory.com

 

 

 

https://testmanager.tistory.com/notice/595

 

[공유] 소프트웨어 테스트 대상 사이트/앱/소스 코드

블랙박스 테스트(Black-box testing) 실습할수있는 공개 웹사이트/앱 난이도 순 플랫폼추천 Tier난이도주요 강점AI 자동화 핵심 포인트공개 APICI/CD연계결함예측UI 복잡도접근 방식SauceDemo1하E2E 이커머

testmanager.tistory.com

 

반응형