研究者がKimi K3を調査したことを受け、Claude蒸留疑惑が再燃

Kimi K3とClaudeの蒸留をめぐる問題が再び注目を集めています。新たな研究により、Moonshot AIのモデルとAnthropicのClaudeの推論パターンに、異常な類似性が見つかったためです。

今年2月、Anthropicは中国のAI企業が自社のAIモデルをコピーしようとしていると非難しました。その数か月前には、AnthropicはAlibabaがClaude AIをコピーしようとしたとして直接名指しで非難しています。

その後、Alibabaは職場でのClaude Codeの使用を禁止しました。

研究者らが隠されたAI推論を露呈させる手法を発見

新たな研究論文により、Moonshot AIのKimi K3がAnthropicのClaudeモデルから蒸留された可能性があるという議論が再燃しています。

批評家は以前からこの可能性に疑問を呈していました。AnthropicのFableとKimi K3のリリースの間隔はわずか2週間程度であり、大規模な蒸留を行うには時間が足りないように思われたからです。

しかし今回、研究者らはAPI関連の脆弱性により、基盤となる暗号化を破ることなく推論トレースの抽出が可能だったと述べています。

AI企業は通常、モデル間で暗号化された推論ブロックを転送する際に、内部の推論を隠蔽しています。研究者らは、OpenAI、Anthropic、Googleのシステムでは、こうしたブロックが同一エコシステム内の異なるモデル間で機能する可能性があることを発見しました。

つまり、より強力なモデルによって生成された推論が、暗号化ブロックから情報を明らかにできる、より弱い兄弟モデルに到達する可能性があることを意味します。

Kimi K3がClaudeの推論との異常な互換性を示す

研究者らは、デコードされたClaude Opus 4.8の推論の一部を使用してKimi K3をテストしました。

論文によると、Claudeの推論断片のわずか1％を提供するだけで、Kimi K3のその後の推論が大幅に変化し、その表現や動作がClaudeに近づいたとのことです。

研究者らはまた、一部のClaudeおよびGPTの推論シーケンスは、競合するオープンモデルと比較して、Kimi K3からはるかに容易に抽出できることを発見しました。

特定の推論スパンについて、論文ではKimi K3からの抽出は次に近いモデルと比較して約6桁も容易だったと報告されています。

また、Kimi K3はDeepSeek-V4-Flashなどのモデルと比較して、Claudeが生成したテキストを予測し継続する確率が異常に高いことも示しました。

この発見はKimi K3がClaudeから蒸留されたことを証明するものではない

研究者らは、Kimi K3がClaudeの推論パターンと異常に強い互換性を示していると主張しています。

これらの結果は何らかの形で蒸留が行われたという説を裏付ける可能性はありますが、Moonshot AIがどのようにKimi K3をトレーニングしたかを立証するものではありません。

Moonshotのトレーニングデータや手法にアクセスできない以上、研究者らが疑惑を最終的に検証することはできません。

したがって、この調査結果は、Claude蒸留をめぐる広範な議論に状況証拠を追加するものであり、MoonshotがAnthropicのモデルをコピーしたことを証明するものではありません。

その他のAI関連ニュースでは、EUではClaude AIのテキストに不可視のウォーターマークとメタデータが埋め込まれることになりました。

Via Wccftech