Gemini 4 Argon, 지능·성능·가격 삼박자 분석
Gemini 4 Argon (High): Intelligence, Performance and Price Analysis
Artificial Analysis가 Gemini 4 Argon(high)의 지능, 성능, 가격을 종합 분석했다. AA Intelligence Index v4.3.2는 AA-Briefcase, GDPval-AA, Terminal-Bench 4.0, Humanity's Last Exam 등 10개 평가를 포함하며, 에이전트 지식 노동, 코딩, 과학 연구 등 다양한 능력을 측정한다. 지능 지수 대비 비용, 토큰 사용량, 컨텍스트 윈도우까지 세부 지표로 비교해 모델의 실질적 가치를 드러낸다.
AA-Omniscience Index는 지식 신뢰성과 환각을 측정한다. 정답에는 보상을, 환각에는 페널티를 주며, 답변을 거부하는 경우에는 페널티가 없다. 점수는 -100에서 100까지이며, 0은 정답과 오답이 같은 수준임을, 음수는 오답이 더 많음을 의미한다.
HN 토론
61- aliljet
OpenAI에게 이건 뼈아픈 일로 보일 수밖에 없다. 그들의 리드는 주로 가치(리셋에 리셋을 거듭한 결과)에서 점수를 따서 얻은 것이었는데, 이제는 가격에서 밀리고 성능에서도 최고이거나 동등한 수준에 이르고 있다. 나는 지금도 Opus 5.5에 프리미엄을 지불할 의향이 있다. 거의 무제한으로 쓸 수 있기 때문이다. 하지만 Google은 조용히 잠들어 있는 왕이다.
모두가 서로를 지켜보는 걸 즐기지만, 나는 Google이 검색 제품을 통해 다른 누구보다 더 많은 토큰을 태울 것이라고 장담한다. 그리고 이제 그들은 조용히 최전선을 따라잡고 있다...
- mchusma
솔직히 말해서 Google이 스스로에게 정직하다면 이건 C 학점 정도로 여겨질 것 같다.
오랫동안 최전선 근처에도 가지 못했던 그들이 이제 3위에 랭크되고, 오늘날 더 저렴한 모델들과 대략 동등한 수준의 모델을 사전 발표하고 있다.
최전선 게임에 남아 있기 위해 출시를 고려한다는 점은 좋다.
(나는 3.7 flash가 탄탄한 출시였다고 생각한다. 그래서 그들은 대화에 참여하고 있는 편이다. 그리고 그들의 이미지, 오디오, 라이브 모델은 좋다.)
- mlmonkey
그런데 나는 아직도 gemini.google.com에서 Gemini 3.1Pro를 제공받고 있다 :-D
이건 월 $20 유료 요금제인데도 그렇다 :cry:
- godbox
정말 지루한 잔치다. 지능이나 가격 면에서 동료 모델들에 비해 의미 있는 개선을 보여주지 못하는 또 하나의 모델. Google은 사실상 다른 모델들을 "따라잡았다"고 발표한 셈이다. 나는 그들이 Flash 부문에서 훌륭한 작업을 해왔다고 생각하는데, 이걸 보니... 실망스럽다?
- lhk931122
Claude와 ChatGPT가 이미 자리 잡은 상황에서 Google이 끼어들 수 있을지 모르겠다. 나는 둘 다 사용 중이지만, Google이 이 Gemini도 내가 쓸 만큼 충분히 좋게 만들 수 있는지, 아니면 둘 중 하나(Claude와 ChatGPT)를 취소하고 이걸 쓸지 계속 지켜볼 것이다.