A.X LLM Series

SK텔레콤의 독자 개발 한국어 특화 대규모 언어 모델

A.X LLM

A.X LLM은 SK텔레콤이 독자 개발한 한국어 특화 대규모 언어 모델(Large Language Model)입니다. A.X K1, A.X 4.0, A.X 3.1 시리즈가 오픈소스로 공개되어 있으며, 학술 연구 및 상업적 용도로 자유롭게 사용할 수 있습니다.

프로젝트 정보

주요 특징

A.X K1 시리즈

  • 519B-A33B Sparse MoE: 총 519B 파라미터 중 토큰당 33B 파라미터가 활성화되는 대규모 Mixture-of-Experts 모델
  • Hybrid Reasoning Control: Think / Non-Think 모드를 통해 작업 성격에 따라 깊은 추론과 낮은 지연 시간을 선택
  • 긴 컨텍스트 처리: 131,072 토큰 컨텍스트 길이를 지원
  • 다국어 및 코드 토크나이저: 한국어, 영어, 중국어, 일본어, 스페인어와 코드 데이터를 고려한 BBPE 기반 토크나이저 적용

A.X 4.0 시리즈

  • 72B 모델: 대규모 한국어 처리 최적화
  • 7B Light Model: 효율적인 경량 모델
  • 한국어 토큰 효율성: GPT-4o 대비 약 33% 향상
  • 실제 서비스 적용: SK텔레콤 A. 통화 요약 서비스에 사용 중

A.X 3.1 시리즈

  • 34B 모델: 독자 개발 sovereign AI 모델
  • Light Model: 경량화 버전
  • 코딩 및 수학적 추론 능력 대폭 향상
  • KMMLU 벤치마크: 69.20점 (A.X 4.0 대비 약 88% 성능)

A.X 4.0-VL-Light

  • Vision-Language 모델: 이미지와 텍스트 통합 처리
  • 멀티모달 AI: 시각 정보 이해 및 분석 가능

기술적 성과

한국어 처리 능력

  • KMMLU(대규모 한국어 이해 벤치마크)에서 우수한 성능
  • 한국어 대화, 문서 이해, 요약에 특화
  • 한국 비즈니스 환경에 최적화

모델 아키텍처

  • A.X K1: from-scratch 학습한 519B-A33B 독자 구조 Sparse MoE 모델
  • A.X 3 시리즈: 처음부터 독자 개발한 sovereign AI
  • A.X 4 시리즈: 오픈소스 모델에 대규모 한국어 데이터로 CPT(Continual Pre-Training) 적용

활용 사례

SK텔레콤 내부 서비스

  • A. 통화 요약 서비스 (2025년 5월~)
  • 고객 상담 챗봇
  • 사내 문서 분석 및 검색

기대 용도

  • 한국어 대화형 AI 서비스
  • 텍스트 생성 및 요약
  • 번역 및 감성 분석
  • 코드 생성 및 수학 문제 해결
  • 한국어 콘텐츠 생성

벤치마크 성능

모델파라미터 수KMMLU 점수특징
A.X K1519B-A33B80.2 (Thinking Mode)Sparse MoE, 긴 컨텍스트
A.X 4.072B78.3우수 성능
A.X 3.134B69.2독자 개발
A.X 4.0 Light7B-효율성
A.X 3.1 Light--경량화

리소스


최종 수정 2026년 7월 8일: Add A.X K1 to A.X LLM project page (578fb97b0)