Search

중국 문샷, 2조 8천억 매개변수 ‘키미 K3’ 공개…오픈 모델이 페이블 성능 낸다

중국 문샷, 2조 8천억 매개변수 '키미 K3' 공개…공개 모델 사상 최대 규모
중국 문샷, 2조 8천억 매개변수 '키미 K3' 공개…공개 모델 사상 최대 규모

중국 베이징의 문샷 AI(Moonshot AI)가 공식 기술 블로그를 통해 새 모델 ‘키미 K3(Kimi K3)’를 공개했다. 매개변수 2조 8천억 개 규모로, 가중치를 공개하는 오픈웨이트 모델 중 처음으로 3조 개 수준에 올라선 모델이다. 네이티브 비전 처리와 100만 토큰 컨텍스트 창을 함께 제공한다.

문샷은 발표문에서 키미 K3의 전반적인 성능이 클로드 페이블 5와 GPT-5.6 솔 같은 최상위 비공개 모델에는 아직 못 미친다고 스스로 밝혔다. 다만 자체 평가 스위트 전반에서 프런티어급 성능을 냈고, 함께 시험한 다른 모델들은 일관되게 앞섰다고 설명했다.

구조 면에서는 키미 델타 어텐션(KDA)과 어텐션 레지듀얼(AttnRes)을 기반으로 한다. 전문가 혼합(MoE) 희소성을 키워 896개 전문가 중 16개만 활성화하는 스테이블 레이턴트MoE를 적용했고, 문샷은 이런 구조 변경으로 전작 K2 대비 스케일링 효율이 약 2.5배 개선됐다고 밝혔다.

키미 K3는 48시간 자율 실행만으로 자체 아키텍처용 나노 모델 칩을 설계했는데, 4제곱밀리미터 면적에서 100메가헤르츠로 타이밍을 맞추고 시뮬레이션 기준 초당 8,700토큰 이상의 디코딩 처리량을 냈다. GPU 커널 최적화 시험에서는 클로드 페이블 5와 대등했고 클로드 오퍼스 4.8과 GPT-5.6 솔, GPT-5.5는 크게 앞섰다.

키미 K3는 현재 키미닷컴과 키미 워크, 키미 코드, 키미 API에서 쓸 수 있다. API 가격은 100만 토큰당 캐시 적중 입력 0.30달러, 캐시 미적중 입력 3달러, 출력 15달러다. 전체 모델 가중치는 7월 27일까지 공개할 예정이다.

문샷은 발표문에 한계도 함께 적어 뒀는데, 세션 도중 다른 모델에서 K3로 갈아타면 생성 품질이 크게 불안정해질 수 있고, 긴 작업에 최적화된 탓에 사소한 문제나 모호한 지시를 만나면 이용자 대신 예상 밖의 결정을 내리기도 한다고 한다. 문샷은 전반적인 사용 경험에서 클로드 페이블 5, GPT-5.6 솔과 아직 눈에 보이는 차이가 있다고 인정했다.

자세한 내용은 문샷 AI 공식 블로그(Moonshot AI)에서 확인할 수 있다.

이미지 출처: 문샷 AI