[뉴스토마토 이지은 기자] 정부의 독자 인공지능(AI) 파운데이션 모델(독파모) 프로젝트 2차 평가에서 LG AI연구원과
SK텔레콤(017670), 업스테이지가 살아남았습니다. 글로벌 AI 성능 평가에서 두각을 나타낸 모티프테크놀로지스는 고배를 마셨습니다. 모델의 기술적 성능뿐 아니라 사용성과 활용성 등을 종합한 평가에서 근소한 차이로 희비가 갈렸습니다. 하반기에는 3개 팀이 2개 자리를 놓고 다시 경쟁합니다. 정부는 내년 초 최종 2개 팀을 선정한다는 방침입니다.
과학기술정보통신부와 정보통신산업진흥원(NIPA)은 18일 독파모 프로젝트 2차 단계평가 결과 업스테이지, SK텔레콤, LG AI연구원 등 3개 정예팀이 다음 단계에 진출한다고 밝혔습니다. 평가 대상은 LG AI연구원의 K-엑사원 2.0, SK텔레콤의 A.X K2, 업스테이지의 솔라 오픈2, 모티프테크놀로지스의 모티프3 등 4개 모델이었습니다.
2차 평가는 벤치마크 평가 40점, 전문가 평가 35점, 사용자 평가 25점으로 진행됐습니다. 벤치마크 평가는 글로벌 AI 모델 평가지수인 AAII와 NIA 벤치마크를 활용했고, 전문가 평가에는 외부 AI 전문가 10명이 참여했습니다. 사용자 평가에는 AI 전문 사용자 49명과 일반 국민 185명이 참여했습니다. 1차 평가와 비교해 산업 현장 적용과 AI 생태계 파급 효과에 대한 평가가 확대됐고, 일반 국민의 사용성 평가도 새롭게 도입됐습니다.
1·2차 단계평가 기준 변화. (자료=과기정통부)
평가 결과는 박빙이었습니다. 벤치마크 평가에서 4개 팀의 평균은 22.5점으로 1위와 4위 간 격차가 4점에 그쳤습니다. 전문가 평가 평균은 28.8점으로 1위와 4위의 차이가 2.4점이었고, 사용자 평가 평균은 17.6점으로 격차는 5점이었습니다. 벤치마크 평가에서 30점을 넘긴 팀은 없었으며, 평가 항목마다 순위가 달라 일관되게 1위를 차지한 팀도 없었다는 게 정부 설명입니다. 정부는 근소한 점수 차이 등을 고려해 팀별 세부 점수와 순위는 공개하지 않았습니다.
특히 탈락한 모티프는 모델의 기술적 성능에서는 두각을 나타냈습니다. 모티프3는 AAII에서 47점을 기록하며 전 세계 AI 기업별 최고 득점 모델 기준 10위에 올랐습니다. 미국과 중국을 제외한 국가에서 개발한 AI 모델 가운데 가장 높은 성능입니다. 전문가위원회도 아키텍처부터 토크나이저, 옵티마이저, 커널까지 자체 개발해 외부 종속을 제거한 점 등을 긍정적으로 평가했습니다. 다만 종합평가에서는 사용성과 활용성 등이 영향을 미쳤습니다. 과기정통부는 이날 브리핑에서 모티프에 대해 "AAII 점수에서 눈에 띄는 뛰어난 성과를 보여준 게 분명하다"면서도 "다른 평가들을 종합하면 기술력은 뛰어났지만 사용성·활용성 부분에서는 다른 기업보다 약간 낮은 평가를 받았다고 볼 수 있다"고 설명했습니다. 다만 벤치마크·전문가·사용자 평가 가운데 특정 지표 하나가 당락을 결정했다고 보기는 어렵다는 게 정부 입장입니다.
류제명 과학기술정보통신부 2차관이 18일 오전 서울 종로구 정부서울청사에서 독자 AI파운데이션 모델 프로젝트 2차 단계평가 결과 발표를 하고 있다. (사진=뉴시스)
모티프는 이번 평가 결과와 별개로 프론티어급 AI 모델 개발을 지속한다는 계획입니다. 임정환 모티프테크놀로지스 대표는 "독파모 프로젝트를 통해 기술력만으로 한국에서도 글로벌 프론티어 수준의 AI 모델 개발이 가능하다는 것을 증명했다는 점에서 뜻깊다"며 "앞으로도 지속적으로 글로벌 프론티어 모델 개발에 전력을 다하겠다"고 밝혔습니다.
다음 단계에 진출한 3개 팀은 각자의 강점을 중심으로 모델 고도화에 나섭니다. LG AI연구원은 초대형 모델을 앞세워 글로벌 프론티어 모델과의 경쟁에 집중합니다. 임우형 LG AI연구원 공동 연구원장은 "소형 모델만으로는 글로벌 빅테크와의 기술 격차를 줄이기 어렵기 때문에 동일한 스케일 체급에서 동등 이상의 성능을 구현해 내는 것을 목표로 도전을 이어나갈 것"이라고 말했습니다.
SK텔레콤은 산업과 실생활에서의 AI 확산에 방점을 찍었습니다. SK텔레콤은 "자체 AI 모델의 산업과 실생활 확산 성과를 바탕으로 국내 AI 생태계가 함께 활용할 수 있는 결과물을 만드는 데 집중할 것"이라고 밝혔습니다. A.X K2는 전문가 평가에서 수리 추론과 한국어 영역의 성능과 함께 대규모 상용 서비스 탑재에 따른 사용성과 실용성, 국방·제조·법무·세무 등 산업 분야 적용 가능성에서 높은 평가를 받았습니다.
업스테이지는 실사용과 글로벌 확장에 집중합니다. 업스테이지는 "최종 실증 단계로 넘어가는 만큼 포털 다음과 컨소시엄 참여사 등을 통해 국민들이 직접 체감할 수 있는 실사용 모델을 고도화하는 데 최선을 다할 것"이라며 "아시아권으로 지원 언어를 확대해 글로벌 확산 기반도 마련할 계획"이라고 설명했습니다.
정부는 3차 평가를 통해 3개 팀을 2개 팀으로 압축할 계획입니다. 다음 단계에 진출한 팀에 대한 고성능 그래픽처리장치(GPU) 지원도 확대합니다. B200 기준 지원 규모는 올해 상반기 768장 수준에서 하반기 1000장 수준으로 늘어납니다.
이지은 기자 jieunee@etomato.com
이 기사는 뉴스토마토 보도준칙 및 윤리강령에 따라 김기성 편집국장이 최종 확인·수정했습니다.
ⓒ 맛있는 뉴스토마토, 무단 전재 - 재배포 금지