‘AI Test Architect Lab 1기’ 성료… 생성형 AI 시스템 검증 전략 수립 및 프레임워크 실전 적용
와이즈스톤이 생성형 AI 및 LLM(대규모 언어 모델) 기반 시스템의 품질 확보를 위해 ‘AI Test Architect Lab 1기’ 프로그램을 실시했다고 8월 20일 밝혔다. 이번 과정은 AI 검증 프로젝트 초기 단계에서 대상 시스템을 분석하고, 품질 리스크 식별 및 테스트 전략을 수립하는 ‘AI 검증 아키텍트(AI Test Architect)’ 양성을 목표로 추진됐다는 설명이다.
최근 enterprise 영역을 중심으로 LLM 및 RAG(검색증강생성) 기술 도입이 급증함에 따라, 환각 현상(Hallucination), 근거 불일치, 데이터 보안, 도메인 특화 오류 등 AI 시스템 고유의 품질 리스크를 사전에 제어할 수 있는 전문 아키텍트의 필요성이 대두되고 있다.
업체 측에 따르면, 와이즈스톤의 ‘AI Test Architect Lab 1기’는 단순한 이론 전달이나 테스트 수행자 양성에 그치지 않고, 참가자가 실제 AI 상담형 시스템 등을 대상으로 △대상 분석 △리스크 분석 △테스트 계획 수립 △테스트 설계 △테스트 수행 △결과 보고 등 검증 전 과정을 직접 수행하는 하이브리드형 실습 교육으로 진행됐다.
특히 이번 교육은 사전에 자체 구축한 ‘AI Test Framework’와 ‘LLM/RAG Test Playbook’, 표준 검증 문서 양식을 바탕으로 진행됐다. 참가자들은 일반 SW 품질특성(기능성, 보안성 등)은 물론 정확성, 투명성, 견고성 등 AI 특화 품질과 금융·규제 등 도메인/운영 리스크를 통합 검토하는 정교한 테스트 케이스(TC) 및 루브릭(평가 기준)을 직접 설계하고 검증했다는 것이다.
와이즈스톤은 이번 프로그램에서 도출된 실전 피드백과 산출물을 바탕으로 오는 8월 말까지 실무에 즉시 적용 가능한 ‘AI Test Framework’ 최종 초안을 확정하고, 고도화된 AI 검증 방법론 패키지를 구축할 계획이다.
와이즈스톤 이영석 대표이사는 “AX(AI 전환) 시대로의 격변기 속에서 AI 시스템의 신뢰성과 안전성 확보는 기업의 성패를 가르는 핵심 요인”이라며, “체계적인 프레임워크와 검증 플레이북을 기반으로 전문 Advisory 및 AI 테스트 아키텍트를 지속 육성하여 국내 AI SW 품질 향상을 선도해 나가겠다”고 전했다.
<저작권자(c)스마트앤컴퍼니. 무단전재-재배포금지>
