이제 번역도 잘 되길… SKT, 세계 최고 한국어 AI 모델 ‘에이닷 엑스 4.0’ 오픈소스 공개

SK텔레콤이 세계 최고 수준의 한국어 처리 능력을 보유한 대규모 언어 모델(LLM) ‘에이닷 엑스(A.X) 4.0’을 오픈소스로 공개했다고 3일(한국 시간) 발표했다. SK텔레콤은 이날 오전 세계적인 오픈소스 커뮤니티 허깅페이스(Hugging Face)를 통해 에이닷 엑스 4.0의 표준 모델과 경량 모델 2종을 공개했다. 표준 모델은 720억 개(72B), 경량 모델은 70억 개(7B)의 매개변수를 갖추고 있어 이용자들이 목적에 맞춰 선택적으로 이용할 수 있다.

에이닷 엑스 4.0은 현존 대규모 언어 모델 중에서도 최상급의 한국어 처리 효율성을 자랑한다. 오픈소스 모델인 Qwen2.5에 방대한 한국어 데이터를 추가로 학습시켜 국내 비즈니스 환경에 최적화된 성능을 발휘한다. SK텔레콤이 자체 설계한 토크나이저(Tokenizer)를 적용한 결과, 같은 한국어 문장을 입력했을 때 GPT-4o보다 약 33% 높은 토큰 효율을 기록했다. 이는 다른 LLM 대비 높은 정보 처리용량과 비용 절감을 동시에 가능하게 한다.

성능 평가에서도 우수한 결과를 보였다. 대표적인 한국어 능력 평가 벤치마크인 KMMLU(Measuring Massive Multitask Language Understanding in Korean)에서 78.3점을 기록해 GPT-4o(72.5점)보다 높은 점수를 받았다. 한국어 및 한국 문화 벤치마크인 CLIcK(Cultural and Linguistic Intelligence in Korea)에서도 83.5점을 획득해 GPT-4o(80.2점)보다 더 높은 한국 문화 이해도를 입증했다.

데이터 보안 측면에서도 강점을 보인다. SK텔레콤은 에이닷 엑스 4.0를 기업 내부 서버에 직접 설치해 사용할 수 있는 온프레미스(On-premises) 방식으로 제공해 기업들이 데이터 보안에 대한 걱정을 덜 수 있도록 한다. 특히 에이닷 엑스 4.0 개발 과정에서도 대규모 학습(CPT, Continual Pre-Training)의 전 과정을 외부와 연동 없이 자체 데이터로 학습해 데이터의 주권도 확보했다.

SK텔레콤은 이미 에이닷 엑스 4.0을 지난 5월 에이닷 통화 요약에 적용해 성공적으로 활용하고 있으며, 추후 자사는 물론 SK그룹 내 다양한 서비스에 적용할 계획이다. 이번에 공개한 모델로 기업들은 파생형 모델을 개발할 수 있고, 연구 분야에서도 활용할 수 있다.

SK텔레콤은 이번 지식형 모델의 오픈소스 공개와 동시에 추론형 모델의 발표도 앞두고 있다. 이달 중으로 수학 문제 해결과 코드 개발 능력이 강화된 추론(Reasoning)형 모델을 공개하고, 이미지와 텍스트를 동시에 이해하고 처리할 수 있는 수준까지 모델을 업데이트할 계획이다. 또한 소버린 AI 관점에서 에이닷 엑스 3.0에 적용한 프롬 스크래치(From Scratch) 방식도 병행하여 개발을 진행하고 있으며, 후속 모델도 순차적으로 공개할 예정이다.

해당 기사의 원문은 SKT 뉴스룸에서 확인 가능하다.

이미지 출처: SKT