Assertive Spec-driven Scoring for Evaluation and Regression Testing의 약자인데요, 자연어로 AI 정책과 기대 동작을 설명하면 테스트 케이스를 자동 생성해줘요

마이크로소프트가 AI 앱의 동작을 자동으로 검증하는 오픈소스 프레임워크 ASSERT를 공개했어요.

Assertive Spec-driven Scoring for Evaluation and Regression Testing의 약자인데요, 자연어로 AI 정책과 기대 동작을 설명하면 테스트 케이스를 자동 생성해줘요. 예를 들어 "사내 외부로 이메일 금지, 기밀 정보는 C레벨만 접근 가능"이라고 적으면 그 규칙을 검증하는 시나리오를 자동으로 만들어줘요.

기존 범용 벤치마크는 서비스별 맥락이나 정책을 반영하기 어렵다는 한계가 있었는데, ASSERT는 그 공백을 채우는 거예요. AI가 기대한 대로 동작하는지 확인하는 게 점점 중요해지는 시대에 꽤 실용적인 도구가 나왔네요.