[안광섭 AI 진테제] 독파모 2차 평가가 남긴 것

[지디넷코리아]필자는 지난 10일 이 코너에서 정부의 독자 파운데이션 모델(이하 독파모) 프로젝트 2차 평가에 대해 썼다. 당시는 결과 발표를 앞둔 시점이었고, 필자는 벤치마크 점수보다 실제 쓰임새를 물어야 한다고 주장했다. 그 뒤 열흘 사이에 많은 일이 일어났다.독파모 2차 평가 결과는 그제 18일 나왔다. 그 사이 벤치마크 점수만 겨냥해 모델을 튜닝했다는 '벤치맥싱(benchmaxing)' 공방이 업계를 달궜고, 평가 기관인 아티피셜 애널리시스(Artificial Analysis)가 직접 입장을 내는 상황까지 갔다. 18일 발표에서 SK텔레콤, LG AI연구원, 업스테이지가 살아 남았고, 아티피셜 애널리시스 벤치마크 점수가 가장 높았던 모티프테크놀로지스는 떨어졌다. 다음 날 언론은 세부 점수 공개를 요구했고, 오늘(20일) 과학기술정보통신부는 항목별 1위 기업과 점수를 담은 보도설명자료를 냈다.필자는 지난회 칼럼을 "무엇을 재느냐가 결국 무엇을 만드느냐를 결정한다"는 문장으로 끝