Kimi K3 공개: 3조급 오픈 모델 경쟁의 새 변수

도입

7월 17일 새벽, 문샷 AI는 Kimi K3를 발표했다. 공개된 요약만 보더라도 이번 모델은 단순한 버전 업데이트로 보기 어렵다. 2.8조 파라미터, MoE 구조, 896개 expert, 매번 16개 expert 활성화, 100만 token 컨텍스트 창, 네이티브 멀티모달, 그리고 7월 27일 전 전체 가중치 공개 계획이 함께 제시됐기 때문이다.

이 발표가 주목받는 이유는 숫자가 크기 때문만은 아니다. 최근 대형 AI 경쟁에서는 폐쇄형 프런티어 모델과 오픈 모델 사이의 격차가 핵심 쟁점이었다. Kimi K3는 그 간격이 어디까지 좁혀질 수 있는지를 보여줄 수 있는 사례로 떠오르고 있다.

핵심 포인트

• 3조급에 가까운 규모: Kimi K3의 파라미터 수는 2.8조로 소개됐다. 전체 파라미터가 매 추론마다 모두 계산된다는 뜻은 아니지만, 모델 용량 측면에서는 매우 공격적인 설계다.
• MoE 아키텍처 채택: 요약에 따르면 Kimi K3는 896개 expert를 갖고 있으며, 매번 16개를 활성화한다. 이는 큰 모델 용량과 추론 효율 사이의 균형을 노린 구조로 볼 수 있다.
• 100만 token 장문 컨텍스트: Kimi 계열은 장문 처리 능력으로 알려져 왔다. 100만 token 컨텍스트 창은 긴 문서 분석, 복잡한 자료 검토, 기업 지식 기반 처리 같은 영역에서 활용 가능성을 높인다.
• 네이티브 멀티모달: 텍스트만 잘하는 모델로는 차세대 기반 모델의 요구를 충족하기 어렵다. Kimi K3가 처음부터 멀티모달을 내세운 점은 모델의 목표 범위가 더 넓다는 신호다.
• 전체 가중치 공개가 핵심 변수: 계획대로 7월 27일 전 전체 가중치가 공개된다면, Kimi K3는 세계 첫 3조급 오픈소스 모델로 자리매김할 수 있다. 연구자, 개발자, 기업 배포 환경 모두에 영향을 줄 수 있는 부분이다.

의미와 영향

Kimi K3의 의미는 단순히 더 큰 모델이 나왔다는 데 있지 않다. 대규모 파라미터, 긴 컨텍스트, 멀티모달, 오픈 가중치가 동시에 제시되면서 오픈 모델의 한계에 대한 시장의 판단이 바뀔 수 있다.

다만 현재 공개된 소재에는 상세 벤치마크, 학습 방식, 추론 비용, 라이선스 조건, 실제 배포에 필요한 자원 등이 포함돼 있지 않다. 따라서 파라미터 규모만으로 성능 우위나 실사용 가치를 단정하기는 어렵다.

그럼에도 Kimi K3는 분명한 신호를 보낸다. AI 경쟁은 이제 가장 강력한 폐쇄형 모델을 누가 보유했는지만의 문제가 아니다. 능력, 개방성, 생태계, 실제 적용 가능성을 함께 갖춘 모델이 다음 단계의 기준이 될 가능성이 커지고 있다.

출처: OSChina