Mistralが10月6日にLarge 4の公開APIプレビューを発表した。自社のDense 200画像内位置特定評価では42%で、GPT-6 Astraの41%より1ポイント高かった。一つの評価だけで全体的な優位は判断できない。
Artificial Analysisの総合知能指数38は異なる課題による別の値だ。Dense 200の42%と直接比較できず、どちらも後日公開される重みの性能を検証したものではない。
APIと重みの異なる公開日程
APIの利用とモデルの重みの取得は別の段階だ。公式発表は月末公開を予告し、Hugging Faceは10月31日を予定日とする。Mistralはプレビューの強化学習も継続中だと説明する。
アクティブ規模の集計と公開状態
公式文書は総数1.05T、アクティブ52Bの専門家混合モデルと視覚エンコーダーを説明する。Hugging Faceによるとトークン当たり49Bで、埋め込み層と出力層を含めると52Bになる。二つの値は同じモデルの集計範囲の違いだ。
現在のAPI評価は、後に公開されるチェックポイントの品質や運用条件まで確定しない。セルフホスティングの日程には実際のファイル、ライセンス、実行案内の公開が別の条件として残る。
公式モデルページは文脈長を100万トークンとする一方、Artificial Analysisは524Kと記す。長文評価では利用するAPIの実際の設定を確認することになる。
Mistral Large 4の現時点の結果はプレビューサービスの結果であり、セルフホスティングの判断は実際の重み公開を待つ。