[피드백 요청] AI Agent를 이용한 E2E 테스트 서비스를 만들고 있습니다!!! 평가 부탁드립니다...
안녕하세요.
E2E 테스트를 운영하다 보면 이상한 순간이 있습니다.
테스트는 자동화했는데,
실패한 테스트를 해석하는 일은 여전히 사람이 하고 있다는 점입니다.
빨간 테스트 하나가 뜨면 그때부터 사실상 “수사”가 시작됩니다.
이게 진짜 제품 버그인지,
테스트 코드가 깨진 건지,
네트워크나 실행 환경 문제인지,
아니면 단순 타이밍 이슈인지.
결국 누군가는 다시 들어가서
영상 보고, 스크린샷 보고, 로그 보고, 스텝 따라가면서 판단해야 합니다.
문제는 이 과정이 생각보다 자주 반복된다는 겁니다.
E2E는 원래 제품을 지키기 위한 안전장치인데,
어느 순간부터는 팀에 또 하나의 경고 알림처럼 느껴질 때도 있었습니다.
그래서 저희는 이 문제를 줄이기 위해 Jaebau라는 서비스를 만들고 있습니다.
Jaebau는 단순히 테스트를 실행하는 도구라기보다,
Agentic E2E 테스트 실행 후 실패 원인을 빠르게 파악할 수 있는 리포트에 집중하고 있습니다.
특히 테스트 실패 시 아래 내용을 한 화면에서 볼 수 있도록 만들고 있습니다.
실패한 시나리오
실패 지점
실행 스텝
스크린샷 / 영상
실패 원인 분류
제품 버그 / 환경 문제 / 테스트 코드 문제 판단 보조
저희가 집중하는 질문은 하나입니다.
“이 테스트는 왜 실패했고, 지금 누가 봐야 하는가?”
이 문제가 줄어들면
QA Lead, SDET, DevEx, 플랫폼 팀이 실패한 테스트를 다시 해석하는 시간을 줄이고,
더 빠르게 공유하고 결정할 수 있을 거라고 생각합니다.
아직 완성된 정답이라기보다는,
실제 E2E 운영자분들의 피드백을 받으면서 더 날카롭게 다듬고 싶은 단계입니다.
데모/소개 영상을 보시고 아래 관점에서 편하게 의견 주시면 정말 감사하겠습니다.
Jaebau 데모영상
실제 E2E 운영에서 이런 문제가 자주 발생하는지
실패 원인 분류가 실무에 도움이 될지
리포트에서 꼭 봐야 하는 정보가 무엇인지
지금 흐름에서 부족하거나 과한 부분이 있는지
가벼운 댓글 피드백도 정말 큰 도움이 됩니다.
관심 있으시면 Contact US로 의견 남겨주셔도 좋습니다.
Jaebau Contact
감사합니다🙂
