AI·소프트웨어 테스트 전문기업 STA테스팅컨설팅이 소프트웨어 QA 업무 자동화와 대규모 언어 모델(LLM)의 응답 위험 검증을 지원하는 AI 테스트 플랫폼을 공개했다. 회사는 지난 5일 코엑스에서 열린 제12회 국제 품질 테스팅 콘퍼런스 'BESTCON 2026'에서 대화형 AI 기반 QA 플랫폼 'Qnnect'와 'AI 레드팀 테스트 플랫폼'을 소개했다.
Qnnect는 QA 과정에서 반복적으로 발생하는 문서 작성과 테스트 준비, 실행 결과 분석 등을 AI와의 대화를 통해 하나의 환경에서 처리할 수 있도록 설계됐다. 문서와 Jira, Confluence 등의 자료를 기반으로 테스트 계획서와 요구사항, 테스트 케이스, 자동화 스크립트, 보고서 등을 생성할 수 있다.
프로젝트를 MCP로 연결하면 생성한 요구사항과 테스트 케이스를 등록하거나 자동화 스크립트를 첨부하는 것도 가능하다. 테스트 실행 이후에는 회차별 실패 원인을 분석하고 수정하는 과정부터 결함 등록과 재실행까지 지원해 QA 산출물 작성과 후속 업무를 연계한다.
STA테스팅컨설팅은 Qnnect를 QA 인력이 부족한 기업이나 개발자가 테스트 업무까지 맡는 조직, 반복적인 문서 작성 부담을 줄이려는 전문 QA 조직 등에 활용할 수 있다고 설명했다. 현재 실제 업무 환경에서의 적용 가능성을 검증하기 위한 PoC 참여 기업도 모집하고 있다.
함께 공개된 AI 레드팀 테스트 플랫폼은 LLM 기반 서비스의 응답 과정에서 발생할 수 있는 위험을 점검하는 데 초점을 맞췄다. 검증 대상 모델의 API를 연결한 뒤 테스트 케이스를 선택해 레드팀 테스트를 수행하며, 사람이 직접 검증하거나 AI가 자동으로 수행하는 방식, 사람과 AI가 함께 참여하는 방식 등 세 가지 형태를 지원한다.
검증은 모델 연결과 검증 범위 설정, 레드팀 수행, 결과 및 위험 확인 단계로 진행된다. 테스트 결과에서는 수행률과 결과 분포, 위험 심각도, 취약 케이스 등을 확인할 수 있도록 구성했다.
한편 STA테스팅컨설팅은 AI 테스트 분야의 국제표준 활동에도 참여해 왔다. ISO/IEC TS 42119-2(AI Testing) 국제표준 제안 및 제정을 주도했으며, ISO/IEC 29119-11(AI 기반 시스템 테스트)과 ISO/IEC 29119-13(생체인식 시스템 테스팅) 기술보고서의 제안 및 제정도 주도했다. ISTQB AI Testing과 Gen-AIT 실러버스 제안 및 개발에도 참여했다.
이원지 기자 news21g@etnews.com
