LIVE MARKET
시장 시세 연결 중
← 실시간 뉴스로

구글 딥마인드, 도면·임상 영상 읽는 실무형 벤치마크 공개

제목 연관성·주요 수치·시장 영향·향후 전망을 기준으로 핵심 문장을 선별한 요약 브리핑입니다.

KEY POINTS

핵심 포인트

  • 구글 딥마인드가 도면·임상영상 등을 바탕으로 실제 전문직 업무 수행 능력을 평가하는 AI 에이전트 벤치마크를 공개했다.
  • 평가는 결과물의 품질과 작업 비용, 수행 효율 차이까지 함께 비교했다.
  • [디지털투데이 최재원 기자] 구글 딥마인드가 AI 에이전트의 실제 전문직 업무 수행 능력을 평가하는 새로운 벤치마크를 공개했다.
시장 반응 중립GOOGL
ARTICLE BRIEF

본문

구글 딥마인드가 도면·임상영상 등을 바탕으로 실제 전문직 업무 수행 능력을 평가하는 AI 에이전트 벤치마크를 공개했다. 평가는 결과물의 품질과 작업 비용, 수행 효율 차이까지 함께 비교했다. [디지털투데이 최재원 기자] 구글 딥마인드가 AI 에이전트의 실제 전문직 업무 수행 능력을 평가하는 새로운 벤치마크를 공개했다. 지난 14일(현지시간) 대만 매체 IT홈에 따르면 구글 딥마인드는 AI 분석업체 아티피셜 애널리시스(Artificial Analysis)와 공동으로 멀티모달 지식 에이전트(MKA) 벤치마크를 개발했다. MKA는 건축 도면과 전자회로 설계도, 임상 영상 등 시각 정보가 복잡한 자료를 AI에 제공하고 이를 바탕으로 실제 업무 결과물을 제작하도록 설계됐다. 평가 과제는 총 200개로, 비즈니스와 건설, 엔지니어링, 금융, 의료, 과학 등 10개 분야 83개 직군을 다룬다.

과제마다 평균 70개 안팎의 세부 평가 기준을 적용하며, 사실 정확성에 75%, 시각적 완성도에 25%의 가중치를 부여한다.

공정한 비교를 위해 모든 모델에는 동일한 도구와 작업 환경, 최대 250회의 작업 기회가 제공됐다. 평가 결과 앤트로픽의 클로드 페이블 5.2가 고난도 평가 항목의 가중 달성률 57%로 1위를 차지했다. 클로드 페이블 5.2의 과제당 평균 비용은 31.97달러(약 4만2700원)였지만 제미나이 4 카본은 6.29달러(약 8400원)로 약 5분의 1 수준이었다. 과제를 완료하는 데 필요한 평균 작업 횟수는 30~130회로 크게 벌어졌다.

단순한 질문에 답하는 수준을 넘어 복잡한 도면과 의료 영상 등을 분석하고 보고서나 스프레드시트까지 완성하는 능력을 측정하는 것이 특징이다.지난 14일(현지시간) 대만 매체 IT홈에 따르면 구글 딥마인드는 AI 분석업체 아티피셜 애널리시스(Artificial Analysis)와 공동으로 멀티모달 지식 에이전트(MKA) 벤치마크를 개발했다.MKA는 건축 도면과 전자회로 설계도, 임상 영상 등 시각 정보가 복잡 [디지털투데이 최재원 기자] 구글 딥마인드가 AI 에이전트의 실제 전문직 업무 수행 능력을 평가하는 새로운 벤치마크를 공개했다.