리턴제로 "한국어 이해력 세계 최고 수준" > IT/과학기사 | it/science

음성인식 인공지능AI 스타트업 리턴제로가 한국어 언어모델의 다분야 사고력을 측정하는 ‘로직KorLogicKor’ 리더보드에서 sLLM경량화된 거대언어모델 가운데 1위를 달성했다고 5일 밝혔다.


매개변수파라미터 9B의 모델 크기를 갖는 리턴제로 LLM은 지난 31일 LogicKor에서 총점 8.67점을 기록하며, 매개변수 13B이하인 sLLM 모델 중 최고 성능을 보여 신기록을 달성했다. 이는 직전 최고기록인 8.21점을 크게 웃도는 수치다. LogicKor은 오픈AI·앤스로픽 등 글로벌 빅테크와 국내 기업들이 모두 참여하는 한국어 언어모델 벤치마크로, LLM의 한국어 추론, 수학, 글쓰기, 코딩, 이해 등 6개 요소를 측정한다.

리턴제로 LLM은 ‘이해’ 능력 파트에서 두각을 드러냈다. 리턴제로 LLM의 ‘이해’ 능력은 10점을 기록하며, 동일 크기의 LLM은 물론 모든 크기의 매개변수를 가진 LLM을 모두 통틀어 가장 높은 점수를 나타냈다. 이에 더해 추론 능력에서도 미스트랄 AI, 오픈AI 등 글로벌 빅테크 외에는 처음으로 최상위권인 9점대를 기록하며 남다른 수준의 학습능력을 선보였다.

또한 리턴제로 LLM은 짧은 기간만에 높은 수준의 성능을 구현했다는 점이 눈에 띈다. 이번에 선보인 리턴제로의 LLM 모델은 한 달 정도의 신규 파운데이션 모델 파인튜닝 기간을 거쳐 탄생했음에도, LogicKor 리더보드의 성능 평가에서 높은 점수를 받았다. 최근 업무에 AI를 도입하는 기업이 빠르게 늘어나면서, AI 모델을 빠르게 파인튜닝하는 역량의 중요성이 높아지고 있는 추세다.

이참솔 리턴제로 대표는 “리턴제로 LLM이 더욱 매개변수가 많은 일부 모델보다도 우수한 성능을 보여주면서 리턴제로의 기술 역량을 증명한 것 같아 기쁘다”라며 “앞으로도 리턴제로의 노하우를 접목해 글로벌 빅테크와 견주어도 손색없는 최고 수준의 기술을 선보일 것”이라고 말했다.

▶ “파리 한복판 한국 국대 동상 세워졌다”…주인공은 ‘양궁 3관왕’ 임시현

▶ 갈기갈기 찢은 600만원 은행에 가져가니…직원들이 기적을 만들었다

▶ 개최국 프랑스와 맞붙었는데…‘세계 랭킹 2위’도 외면한 방송 3사

▶ 과학고·영재고 졸업하고 카이스트 안 갔네?…어디 입학했나 봤더니 ‘역시나’

▶ 한국 고등학생이 금·은·동메달 휩쓸었다…세계가 주목한 韓과학영재

[ⓒ 매일경제 amp; mk.co.kr, 무단 전재, 재배포 및 AI학습 이용 금지]