350억 파라미터 MoE 구조…동급 최고 성능
'프로·미니' 투트랙 체계로 솔라 LLM 라인업 본격화
(서울=연합뉴스) 권하영 기자 = 업스테이지는 자체 개발한 최신 대규모언어모델(LLM) '솔라 미니 4'를 출시했다고 1일 밝혔다.
솔라 미니 4는 솔라 LLM의 소형 모델 라인업으로, 작은 규모에서 높은 성능과 효율을 동시에 구현하도록 개발됐다.
전체 350억 파라미터의 소형 사이즈에 전문가혼합(MoE) 구조를 적용해, 실제 추론 시에는 30억 파라미터(매개변수)만 선택적으로 활성화함으로써 효율성을 극대화했다는 설명이다.
성능은 글로벌 AI 평가기관 '아티피셜 애널리시스'가 산정하는 '인텔리전스 인덱스(AAII)' 기준 종합 24점을 기록했다.
이는 활성 파라미터 30억 규모의 소형 모델 가운데 최고 수준으로, 알리바바 '큐원 3.6-35B-A3B', 엔비디아 '네모트론 3.5 라이트닝' 등 동급 모델을 모두 앞섰다.
활성 파라미터가 훨씬 큰 엔비디아 '네모트론 3 울트라', 구글 '젬마 4 31B', 샤오미 '미모 V2.5' 등 상위 체급 모델과도 대등하거나 앞선 성능을 기록했다.
업스테이지는 이번 공개로 솔라 LLM을 '프로'와 '미니' 두 가지 라인업 체제로 본격화한다.
김성훈 업스테이지 대표는 "복잡한 에이전트 업무는 '프로', 대규모 업무 자동화는 '미니'로 체계화한 솔라 LLM을 통해 기업이 업무에 가장 알맞은 AI를 선택할 수 있도록 하겠다"고 밝혔다.
kwonhy@yna.co.kr
(끝)
ADVERTISEMENT
<저작권자(c) 연합뉴스, 무단 전재-재배포, AI 학습 및 활용 금지>
ADVERTISEMENT
ADVERTISEMENT
ADVERTISEMENT
ADVERTISEMENT