仏Mistral新モデル、単体指標で中国GLM-5.3上回るも総合は僅差で及ばず
オープンウェイトモデルの選定で「中国勢か欧米勢か」を迷う担当者にとって、判断材料が一つ増えました。フランスのMistralが最新モデルのベンチマーク結果を公表し、コーディング性能で中国の有力モデルに肉薄する数字を示しています。
この記事の要点
何が起きたか
フランスのAI開発企業Mistralは、最新モデル「Mistral Large 4」(ML4)のモデルウェイトを公開しました。あわせて、欧米のオープンウェイトモデルが中国のモデルに対して優位に立つことを示すベンチマークスコアを発表しています。
ML4は1兆パラメーター規模であることから「Le Chonk」という愛称が付けられ、10月上旬にパブリックプレビュー版として公開されていました。選ばれたパートナーとの3週間にわたるテストを経て、Mistralは「西側で開発されたオープンモデルの新たな基準を打ち立てた」と説明しています。モデルには低・中・高の3種類の推論モードが用意されています。
AIエージェントのコーディング能力を測る「Terminal-Bench 4.0」では、ML4のスコアはプレビュー版の28%から41%へ上昇しました。この結果、ML4は中国発のモデル「GLM-5.3」をわずか1ポイント上回っています。一方、関連する3つのベンチマークを合算した総合スコアでは、ML4が48、GLM-5.3が49となり、1ポイント届いていません。
サイバーセキュリティの分野でも評価が進んでいます。防御的サイバーセキュリティを測る「CyberGym」というベンチマークで、ML4はDeepSeekの「V4.1 Flash」をわずかに上回ったといいます。
背景・解説
オープンウェイトモデルとは、モデルの重み(パラメーター)を公開し、企業や開発者が自社環境で動かせるAIモデルを指します。クラウド経由で使う閉じたモデルと違い、社内データを外部に出さずに運用できる点が特徴です。ここ数年、中国発のモデルが低コストで高性能なオープンウェイトモデルを相次いで公開し、欧米企業の間でも採用が広がっていました。
今回の発表は、この流れの中でMistralが示した反撃材料といえる内容です。Mistralは「Artificial Analysis Coding Agent Index」というコーディング性能の指標でトップクラスに入ったとし、タスク当たりのトークン使用量を平均47%削減しながら性能を維持したと説明しています。
サイバーセキュリティ評価への取り組みも背景にあります。AnthropicやOpenAIといった米国企業でも、モデルのサイバー防御能力を外部パートナーと検証する動きが一般的になりつつあります。Mistralも同様に、制限措置を緩めたML4を初期のテストパートナーに提供し、サイバーセキュリティ能力の評価を進めてきました。
仕事や業務への影響
社内でコーディング支援AIの選定を進める企業は、欧米系モデルを候補から外す必要はなくなっています。これまで「中国発モデルの方が性能・コストで優位」という見方が先行していましたが、今回の結果はその差がほぼ解消しつつあることを示しています。例えば、従業員200人規模のシステム開発会社で、データ主権の観点から欧米製モデルを使いたいが性能面で踏み切れずにいた情報システム担当者なら、ML4を比較検討の候補に加える判断は十分に成り立ちます。
トークン使用量の削減も実務上の意味が大きい点です。タスク当たりのトークン使用量が平均47%減るのであれば、月間のAI利用コストが同程度圧縮される余地があります。例えば、月間のコーディング支援AIの利用料が30万円程度の中小企業であれば、同等の作業量でコストが半分近くに抑えられる計算になります。
ただし、GLM-5.3との差はベンチマークによってはわずか1ポイントの範囲に収まっており、優劣が逆転する領域も残っています。モデル選定は単一のベンチマークだけで決めるべきではなく、自社の開発タスクに近い条件での比較が必要です。
不確かな点・注意
ベンチマークのスコアは、モデルがテスト対策的な学習をしている場合があり、実際の業務性能をそのまま反映しているとは限りません。記事内で紹介した差はいずれも1ポイント前後と小さく、評価環境や条件が変われば順位が入れ替わる余地があります。
また、「新たな基準を打ち立てた」「平均47%削減」といった表現はMistralが自ら説明している内容であり、第三者による独立した検証結果ではない点にも注意が必要です。サイバーセキュリティ評価についても、CyberGymという特定のベンチマークでの比較にとどまり、実際の攻撃・防御シナリオでの優劣を保証するものではありません。今回の公開がどの程度の企業に実際に採用されるかは、現時点では分かっていません。
出典
この記事のつくり方
国内外の情報源(企業の公式発表や、国内外の報道)を巡回して、新しいニュースの候補を集めます。
AIが、選んだ出典だけをもとに記事を書きます。出典に無い数字・日付・発言は作りません。
20を超える決まりの検査と、別のAIによる出典との照らし合わせを通った記事だけを公開します。通らなかった記事は公開しません。
公開した記事には、運営者が目を通しています。誤りに気づいたときは、訂正するか、公開を取り下げます。