제미나이 4 아르곤, 외부 평가 224개 모델 중 8위
제목 연관성·주요 수치·시장 영향·향후 전망을 기준으로 핵심 문장을 선별한 요약 브리핑입니다.
핵심 포인트
- 구글의 제미나이 4 아르곤이 아티피셜 애널리시스 평가에서 53점을 받아 224개 모델 중 8위에 올랐다.
- 구글은 자체 평가 점수와 데이터센터 메모리 최적화 사례도 공개했다.
- 구글의 제미나이 4 아르곤이 외부 평가에서 224개 모델 중 8위에 올랐다.
본문
구글의 제미나이 4 아르곤이 아티피셜 애널리시스 평가에서 53점을 받아 224개 모델 중 8위에 올랐다. 구글은 자체 평가 점수와 데이터센터 메모리 최적화 사례도 공개했다. 구글의 제미나이 4 아르곤이 외부 평가에서 224개 모델 중 8위에 올랐다. 구글은 자체 벤치마크 점수와 데이터센터 메모리 최적화 사례도 공개했지만, 외부 기업의 실제 업무 성능은 아직 제한적으로 검증됐다. 코레이 카부쿠오글루(Koray Kavukcuoglu) 구글 딥마인드 수석부사장 겸 구글 최고 AI 아키텍트는 구글 공식 발표에서 모델이 복잡한 장기 업무를 처리하도록 설계됐다고 설명했다. 구글은 장기 소프트웨어 엔지니어링 과제를 평가하는 DeepSWE v1.1에서 77.9%, 업무 자동화 평가인 AutomationBench에서 51.3%를 기록했다고 밝혔다.
외부 평가 기관 아티피셜 애널리시스(Artificial Analysis)는 고추론 설정의 제미나이 4 아르곤에 53점을 부여했다.
모델은 이 기관의 인텔리전스 지수에서 224개 모델 가운데 8위에 올랐다. 지수는 지식 업무와 자동화, 코딩, 추론 등 10개 평가를 합산한다. 구글 자체 평가와 외부 기관 평가도 측정 방식과 범위가 다르므로 각각의 결과로 봐야 한다. 모델 에이전트가 메모리 300TiB 이상을 확보하는 최적화를 찾아 적용했고, 추가 절감량은 500TiB~1PiB로 추산된다고 밝혔다. 블룸버그는 익명 취재원을 인용해 일부 구글 직원이 특히 코딩 성능을 실제 사용에서 벤치마크만큼 높게 평가하지 않았다고 보도했다.