국대 AI 첫 탈락팀은 ‘네이버ㆍNC AI‘⋯정예팀 1곳 추가모집

(사진=본사DB)

독자 AI 파운데이션 모델 프로젝트 1차 단계평가에서 네이버와 NC AI가 탈락하고 업스테이지, SK텔레콤, LG AI연구원이 생존했다. 정부는 정예팀 1곳을 추가 모집할 예정이다.

15일 과학기술정보통신부와 정보통신산업진흥원, 한국정보통신기술협회는 독자 AI 파운데이션 모델 프로젝트 이러한 1차 단계평가 결과를 밝혔다.

과기정통부와 NIPA, 5개 정예팀이 여러 차례의 심층 논의를 거쳐 1차 단계평가 기준을 마련했다. △벤치마크 △전문가 △사용자 평가를 진행해 AI모델 성능(AI Frontier Index)과 실제 현장 등에서의 활용 가능성과 모델크기 등의 비용 효율성, 국내외 AI생태계 등으로의 파급효과·계획 등을 포함한 사용성과 파급효과(AI Diffusion Index) 등을 종합적으로 평가했다.

벤치마크 평가에는 40점을 배점했다. 벤치마크 평가는 NIA 벤치마크 평가(10점), 글로벌 공통 벤치마크 평가(20점), 글로벌 개별 벤치마크 평가(10점)로 진행했다. NIA 벤치마크 평가의 경우 수학, 지식, 장문이해 뿐 아니라 AI안전연구소와 협업해 신뢰성, 안전성 분야까지 폭넓게 평가가 이뤄졌고, 글로벌 공통 벤치마크 평가는 세계적으로 인정되는 벤치마크 13종(에이전트, 수학, 지식·추론, 지시 준수 등 다수 영역 분포)을 선정해 평가가 진행됐다. 글로벌 개별 벤치마크 평가의 경우 정예팀별 글로벌 타겟 모델과 비교 가능한 벤치마크 5종에 대해 평가가 이뤄졌다.

NIA 벤치마크 평가는 SK텔레콤과 LG AI연구원이 10점 만점 중 9.2점의 최고점을 득점했으며 글로벌 공통 벤치마크 평가는 LG AI연구원이 20점 만점 중 14.4점의 최고점을 득점했다. 글로벌 개별 벤치마크 평가는 업스테이지와 LG AI 연구원이 10점 만점 중 10.0점의 최고점을 얻었다. 이를 종합한 벤치마크 평가 점수는 LG AI연구원이 33.6점의 최고점에 올랐다.

전문가 평가는 35점이 만점으로 총 10명의 산학연 외부 AI 전문가로 평가위원회를 구성해 각 팀이 제출한 자료를 바탕으로 장기간의 심층 평가를 추진했다. 개발 전략 및 기술, 개발 성과 및 계획, 파급효과 및 기여계획을 종합 평가했다. 평가위원회는 5개 정예팀이 공개한 모델별 테크니컬 리포트(Technical Report), AI모델 훈련 상태 로그(Log) 파일 등을 분석하여, 정예팀의 기술개발 과정, 기술력(독자성 등 포함) 등을 심도있게 평가했다. 전문가 평가 점수는 LG AI연구원이 35점 만점 중 31.6점의 최고점을 받았다.

사용자 평가는 25점 만점으로 AI 스타트업 대표 등 49명의 AI 전문 사용자가 참여했으며 정예팀이 개발한 AI모델로 구축한 AI 사용 웹사이트를 기반으로 실제 현장에서 활용 가능성과 추론 비용 효율성 등을 심층 분석했다. 사용자 평가 점수는 LG AI연구원이 25점 만점 중 25.0점의 최고점을 득점했다.

이상의 벤치마크 평가, 전문가 평가, 사용자 평가점수를 종합한 결과 LG AI연구원, 네이버클라우드, SK텔레콤, 업스테이지가 4개팀에 포함됐다. 그러나 네이버클라우드가 탈락한 이유는 독자성 기준을 충족하지 못해 독자 AI 파운데이션 모델 조건에 부합하지 못했다는 판단에서다.

과기정통부는 글로벌 AI 모델 의존도를 완화하고 독자 AI모델 기술력을 확보하기 위해 이 프로젝트를 기획·추진해 왔으며 공모안내서에도 '독자 AI 파운데이션 모델'을 "해외 모델 미세조정(파인튜닝) 등으로 개발한 파생형 모델이 아닌 모델의 설계부터 사전학습 과정 등을 수행한 국산 모델(타사 모델에 대한 라이센싱 이슈 부재)"이라고 정의한 바 있다.

과기정통부는 이에 1개의 정예팀을 추가 선정할 계획이다. 이번 프로젝트를 통해 모든 참여 기업이 글로벌 수준으로 도약할 수 있는 기회를 주는데 그 목적이 있었던 만큼 △최초 프로젝트 공모에 접수한 컨소시엄 △이번 1차 단계평가 이후 정예팀에 포함되지 않은 컨소시엄(네이버클라우드, NC AI 컨소시엄) △그 외 역량 있는 기업 등 모두에게 기회를 제공하겠다는 방침이다.

추가로 선정되는 1개 정예팀에게는 그래픽처리장치(GPU)와 데이터 지원, 'K-AI 기업' 명칭 부여 등 독자 AI 파운데이션 모델 개발에 도전할 수 있는 기회를 제공할 예정이다. 행정적 절차를 조속히 진행해 정예팀 1곳의 추가 공모를 신속히 추진할 계획이다. 추가 모집된 1개 정예팀을 포함한 총 4개 정예팀은 올해 상반기 동안 글로벌 탑 수준의 AI모델 개발을 위한 기술혁신 경쟁을 이어 나갈 예정이다.

과기정통부는 “이번 프로젝트는 대한민국이 글로벌 AI 경쟁에서 독자적 기술로 당당히 맞서기 위한 역사적 도전”이라며 “정부는 독자 AI 파운데이션 모델을 반드시 확보하여 지속 가능하고 건강한 AI 생태계를 구축하고, 대한민국이 글로벌 AI 기술 경쟁의 선두에 설 수 있도록 가용한 모든 국가역량과 자원을 집중하겠다”고 말했다.