AI 셀렉트스타, 생성 AI 서비스 신뢰성 검증하는 솔루션 공개

출시와 동시에 금융권 포함 여러 기업에서의 도입 확정돼 셀렉트스타가 생성형 AI 서비스의 신뢰성 검증 자동화 솔루션 ‘DATUMO Eval(다투모 이밸)’을 출시했다. DATUMO Eval은 국내에서 처음으로 신뢰성 검증 프로세스를 자동화해 AI 서비스 운영 중 발생하는 다양한 오류와 위험성을 사전에 식별하고 대응하도록 지원하는 솔루션이다. 주요 기능은 기업의 AI 서비스 유형과 사용 목적에 따른 평가 기준 설정, 도메인 및 서비스에 부합한 맞춤형 평가용 질문 자동 생성, AI 서비스의 답변 자동 평가 및 결과 분석, AI 서비스의 취약점을 이끌어내는 레드티밍 기능 등이 있다. DATUMO Eval은 100만 개 이상의 평가용 질문을 자동 생성해 AI 모델이 처리해야 할 다양한 사용자 발화 패턴을 포괄적으로 평가할 수 있도록 지원한다. 이를 통해 기존에 도메인 전문가가 손수 평가용 질문을 설계하며 발생했던 높은 비용과 기간을 획기적으로 절감했다. 또한, 자동 생성된 평가용 질문은 셀렉트스타의 자체 AI 에이전트 기술을 기반으로 생성되며 기업의 평가 목적, 요구사항, 난이도, 실제 고객 데이터와의 유사성 등 다양한 요소를 반영해 현실적인 평가가 가능하다. 더불

• 서재창 기자
• 2025-02-20 13:48