MiMo-v2.6-Pro, 지능·성능·가격 모두 분석
MiMo-v2.6-Pro: Intelligence, Performance and Price Analysis
Artificial Analysis가 MiMo-v2.6-Pro를 Intelligence Index v4.3.2로 평가했다. 10개 벤치마크를 종합한 지능 지수와 함께 작업당 비용, 출력 토큰 사용량, 컨텍스트 윈도우, 출력 속도, 지연 시간, 엔드투엔드 응답 시간, 모델 크기(오픈 웨이트)를 비교한다. 특히 지능 대비 비용 효율과 오픈소스 접근성을 중심으로 분석한다.
AA-Omniscience Index(높을수록 좋음)는 지식 신뢰성과 환각을 측정한다. 정답에는 보상을 주고 환각에는 페널티를 부과하며, 답변을 거부하는 경우에는 페널티가 없다. 점수 범위는 -100에서 100이며, 0은 정답과 오답이 같은 수준, 음수는 오답이 더 많음을 의미한다.