AI 시대, 새로운 품질 기준 SPeCTRA

이 글은 AI 시대에 LLM 기반 소프트웨어의 새로운 품질 기준인 SPeCTRA에 대해 소개합니다. 과거 ISO 9126/25010의 품질 기준이 AI 소프트웨어에 어떻게 적용되어야 하는지에 대한 고민에서 시작된 SPeCTRA는 안전(Safety), 성능(Performance), 톤 앤 매너(Tone & Manner), 정확성(Accuracy)의 약자입니다.

)의 LLM 테스팅을 위해 개발되었으며, 서비스 관점(Safety, Tone&Manner)과 모델 데이터 관점(Performance, Accuracy)으로 나누어 품질 항목을 검증합니다. SPeCTRA는 AI의 진화에 따라 지속적으로 업데이트되며, 사용자 중심의 체계적인 평가, LLM 품질 측정, 자동화된 테스트, Nightly Test를 통한 철저한 검증을 특징으로 합니다.

통한 철저한 검증을 특징으로 합니다.