미니CPM5-2B '4B미만 1위' 주장…공식 저장소엔 없다

본문

중국 AI 기업 오픈BMB(OpenBMB)의 소형 언어모델 미니CPM5-2B(MiniCPM5-2B)가 인공지능 평가지표 아티피셜 애널리시스 인텔리전스 인덱스(Artificial Analysis Intelligence Index) v4.2에서 15점을 받아 40억(4B) 파라미터 미만 오픈모델... 그러나 이 모델의 공개 체크포인트는 오픈BMB 공식 저장소와 허깅페이스(Hugging Face) 어디에서도 확인되지 않는다. 미니CPM5-2B가 이 같은 성적을 냈다고 크립토브리핑(Cryptobriefing)은 보도했다. 아티피셜 애널리시스는 지난 4일 v4.2를 공개하면서 평가 항목에 AA-브리프케이스(AA-Briefcase)와 서지(Surge)의 GDP.pdf를 새로 추가하고, 외부에 공개되지 않는 비공개(private·held-out) 테스트 비중을 40%로 높였다고 밝혔다.

정작 아티피셜 애널리시스가 운영하는 타이니(Tiny) 오픈소스 순위표에는 미니CPM5-2B가 이름을 올리지 못했다.

현재 이 페이지 상위권은 그래니트(Granite) 4.2 3B, G9v3-3B, 큐원(Qwen)3 4B 2507, 미니CPM5-1B가 차지하고 있다. 오픈BMB의 공식 깃허브(GitHub) 저장소도 현재 배포 중인 모델을 미니CPM5-1B로 표기하고, 다운로드 목록 역시 1B 계열만 올려놨다. 허깅페이스의 미니CPM5 컬렉션 페이지에서도 1B, 1B-SFT, 1B-베이스, 1B-GGUF, 1B-MLX만 확인되며 2B 체크포인트는 보이지 않는다. 오픈BMB의 상업 파트너사인 모델베스트(ModelBest) 공식 페이지 역시 미니CPM5-1B의 아티피셜 애널리시스 지수 점수 17.9를 앞세우고 있을 뿐, 2B 모델 카드는 확인되지 않는다. 평가 구성 자체가 이전 버전과 달라진 만큼, 미니CPM5-2B가 받았다는 15점과 미니CPM5-1B의 17.9점을 포함해 이전 버전 점수와 이번 v4.2 점수를 직접 비교하기는 어렵다.

허깅페이스 토론 게시판에는 '미니CPM5-2B는 언제 나오나(MiniCPM5-2B When?)'라는 제목의 글이 올라와 있다. 미니CPM5-2B의 공개 배포 여부는 오픈BMB, 허깅페이스, 모델베스트 등 어느 공식 채널에서도 확인되지 않는다.