최강 모델도 3개 중 1개 과제밖에 통과 못 할 만큼 난이도가 높거든요

OpenAI가 750개 과제로 구성된 생명과학 AI 벤치마크 LifeSciBench를 공개했어요. 최강 모델도 3개 중 1개 과제밖에 통과 못 할 만큼 난이도가 높거든요.

173명의 박사급 과학자가 직접 작성한 과제들이에요. 게놈학·의약화학·임상과학 등 7개 분야를 다루고, 과제의 79%가 평균 4단계 이상의 추론을 요구해요. 주관식 서술형이라 단순 암기로는 절대 통과 못 해요.

채점도 정밀해요. 과제당 평균 25개 기준(총 19,020개)으로 부분 점수를 매기고, 70% 이상 받아야 통과예요. AI가 생명과학 실무에서 진짜 쓸 만한지 가리는 기준이 생긴 거예요.