과기정통부, 독파모 2차 평가 세부점수 공개…SKT 종합 1위

3 days ago 4

류제명 과학기술정보통신부 제2차관이 18일 서울 종로구 정부서울청사에서 독자 AI파운데이션모델 프로젝트 2차 단계평가 결과 브리핑을 하고 있다. 뉴스1 정부의 독자 AI 파운데이션 모델 프로젝트(독파모) 2차 단계평가에서 SK텔레콤 정예팀이 70.6점으로 종합 1위에 올랐다.27일 과기정통부는 독자 AI 파운데이션 모델 프로젝트 2차 단계평가의 상세 결과를 공개했다. 이날 모티프테크놀로지스(모티프)는 입장문을 통해 과기정통부에 독파모 세부 평가 결과 공개를 요청했다. 이에 다른 정예팀들도 동의하며, 업스테이지·SK텔레콤·LG AI연구원·모티프테크놀로지스 등 4개 정예팀의 2차 단계평가 세부 점수가 공개됐다.● 벤치마크·전문가·사용자 평가 엇갈려…종합은 SKT 1위2차 단계평가 결과, SK텔레콤이 70.6점으로 1위를 차지했다. 이어 업스테이지가 69.9점으로 2위, LG AI연구원이 69.0점으로 3위, 모티프가 65.8점으로 4위를 기록했다.평가는 △벤치마크 평가(AAII 25점·NIA 15점) △전문가 평가(35점) △사용자 평가(AI 전문가 15점·일반 국민 10점)을 종합해 100점 만점으로 진행됐다.부문별로 보면, 벤치마크 평가에서 아티피셜 애널리시스의 AAII 지수 점수는 모티프가 11.9점으로 가장 높았다. 업스테이지(9.4점), SK텔레콤(8.8점), LG AI연구원(7.8점)이 뒤를 이었다. 한국어와 신뢰성 등 7개 분야를 다룬 한국지능정보사회진흥원(NIA) 벤치마크는 SK텔레콤이 13.4점으로 가장 높았다. 업스테이지(13.3점), LG AI연구원(12.8점), 모티프(12.7점) 순이었다.산·학·연 10인으로 구성된 전문가 평가는 LG AI연구원이 29.5점으로 1위, SK텔레콤이 29.3점으로 2위였다. 업스테이지는 29.1점, 모티프는 27.1점이다.사용성 평가를 진행한 AI 스타트업 대표 49인의 사용자 평가에서도 SK텔레콤이 11.6점으로 가장 높았다. 이어 LG AI연구원 11.3점, 업스테이지 10.8점, 모티프는 8.4점이다. 2차 평가 결과표 이미지. 제미나이 생성·편집 이미지 ● ‘무빙타겟’ 방식 독파모, 모티프는 공식 이의신청독파모는 6개월마다 개발 목표를 바꾸는 ‘무빙타겟(Moving Target)’ 방식으로 운영된다. 단계평가 기준도 매차 정예팀과 협의해 마련한다. AI 기술의 빠른 진화를 고려한 조치다.과기정통부는 이번 평가가 순위 경쟁이나 탈락팀 선정이 아닌 국내 A...

Read Entire Article