中国のAIスタートアップMoonshot AIが、大規模言語モデル「Kimi K3」のフルウェイト(重み)をHugging Faceで公開した1。同社は7月16日のモデル発表時に「2026年7月27日までにフルウェイトを公開する」と予告しており3、期限に合わせた公開となる。総パラメータ数は2.8兆で、Moonshot AIはこれを「2.8兆パラメータに到達した初のオープンモデル」「世界初のオープン3Tクラスモデル」と位置づけている。
公開されたリポジトリ(huggingface.co/moonshotai/Kimi-K3)には、モデルカードとともにMXFP4形式のウェイトが置かれ、誰でもダウンロードできる状態になっている1。開発者コミュニティの反応も大きく、Hacker Newsでは公開を伝える投稿が大きな話題となっている。
モデル仕様: 896エキスパートMoEと100万トークンコンテキスト
モデルカードによれば、Kimi K3は総パラメータ2.8兆のうち、推論時に活性化するのは104B(1,040億)に留まる1。Stable LatentMoEと呼ばれるフレームワークでMixture of Experts(MoE)のスパース性を拡大し、896のエキスパートのうち16だけを活性化する構成だ1。MoEは巨大モデルの一部だけを選択的に動かして計算コストを抑える仕組みで、詳しくは用語解説「Mixture of Experts(MoE)とは」で解説している。
アテンション機構は、同社が開発したKimi Delta Attention(KDA)とAttention Residuals(AttnRes)を基盤に、69層のKDAと24層のGated MLAを組み合わせている1。コンテキスト長は1,048,576トークン(100万トークン)で、ネイティブのビジョン(画像理解)機能も備える1。
モデルカードに記載された2026年7月23日現在の評価では、GPQA Diamondで93.5、コーディング系のDeepSWEで67.5、Terminal-Bench 2.1で88.3、Web調査系のBrowseCompで91.2というスコアが示されている1。アーキテクチャ・訓練・評価の詳細は、テクニカルレポートで公開される予定とされていた3。
ライセンス: MITベースだが大規模商用利用には条件
ウェイトは「Kimi K3 License」という独自ライセンスで公開された1。内容はMITライセンスの変形で、研究・学習や小規模な利用はほぼ制限なく行える一方、大規模な商用展開には条件が付く2。
具体的には、Kimi K3を使ったModel as a Service(モデルのAPI提供など)で、ライセンシーと関連会社の合計売上が連続12か月で2,000万ドルを超える場合、Moonshot AIとの別途契約が必要になる2。また、月間アクティブユーザーが1億を超えるか月間売上が2,000万ドルを超える商用サービスでは、UI上に「Kimi K3」の表示義務がある2。
自社製品への組み込みを検討する企業にとっては、この売上条項が実質的な線引きになる。多くの企業の社内利用や中小規模のサービスでは制約にならない一方、モデルを再販するクラウド事業者やAIサービス大手は契約交渉が前提となる。
運用ハードル: 4ビット量子化でも約1.4TB
Kimi K3は訓練段階から量子化を織り込むQAT(量子化認識訓練)を採用しており、公開ウェイトはMXFP4(4ビット浮動小数点)形式、アクティベーションはMXFP8だ1。MXFP4はブロック単位のスケーリング係数を持つ4ビット形式で、NVIDIAのBlackwellとAMDのMI400世代のアクセラレータがネイティブサポートする4。
それでも2.8兆パラメータの規模は大きく、ウェイトの保存だけで約1.4TBが必要になる(FP16なら約5.6TB)45。これを推論用メモリに載せるには、80GBクラスのアクセラレータで18枚程度が必要になる計算だ5。個人や小規模チームが手元で動かせる規模ではなく、「自社ホストできる」のは相応のGPUインフラを持つ組織に限られる。
発表から11日、制裁警告の最中の公開
Kimi K3は7月16日にAPIとコンシューマーアプリで提供が始まり、その時点でウェイトの後日公開が予告されていた(発表時の詳細は過去記事を参照)3。Moonshot AIは2025年7月に1兆パラメータのKimi K2をオープンソース化しており、1年でオープンモデルの規模を2.8倍にしたことになる。
今回の公開は、米中の緊張が高まる最中に行われた点でも注目される。7月22日には米ホワイトハウスOSTPのKratsios局長が、MoonshotがK3開発のためにAnthropicのFableを無断で蒸留したとの情報があるとXで非難し、Bessent財務長官が制裁やEntity List指定の可能性に言及した(詳細は蒸留疑惑と制裁警告の記事を参照)。政府高官による名指しの非難から5日後、Moonshotは予告を撤回することなくウェイトを公開したかたちだ。
「自社ホストの上限」は上がったが、現実解はAPIか
ビジネスでAI導入を検討する読者にとって、今回の公開は「オープンウェイトモデルの性能上限」が3Tクラスに到達したことを意味する。データを自社インフラから出せない業種にとって、フロンティア級に近いモデルを自社ホストできる選択肢が広がることの意味は大きい。直近では元OpenAI CTOのMira Murati氏率いるThinking Machinesのオープンモデル「Inkling」公開もあり、オープンとプロプライエタリの距離は縮まり続けている。
一方で、前述の通り運用には18枚規模のアクセラレータが必要で、ほとんどの企業にとって現実的な利用経路はAPIかホスティング事業者経由になる。さらに米政権が蒸留疑惑で制裁の可能性に言及している状況では、性能・コストだけでなく、提供元の地政学リスクやライセンス条項を含めた評価が欠かせない。モデル選定の判断材料としては、ウェイトが公開されたことで第三者による検証・監査が可能になった点も押さえておきたい。
Sources
- Kimi-K3 - Hugging Face - Moonshot AI公式モデルカード
- Kimi K3 License - 公式ライセンス全文
- Kimi K3 - Moonshot AI公式発表
- Kimi K3 Model Overview - Hugging Faceコミュニティによる技術解説
- Kimi K3’s open weights arrive July 27. The catch is 1.4TB - TECHi