Mistral Large

ベースモデル
開発者
Mistral AI
ライセンス
Mistral Research License
リリース日
2024/2/26
コンテキスト長
128,000 トークン
対応言語
en, fr, de, es, it, pt, ar, hi, ru, zh, ja, ko
知識カットオフ
2024-Q2
officialtext-generationmultilingualfunction-callinglong-context

Mistral AIのフラッグシップモデル。Large(2024年2月)、Large 2(2024年7月)、Large 2.1(2024年11月)と進化。128Kコンテキスト、80以上のコーディング言語対応。ネイティブ関数呼び出し。12言語以上対応(日本語含む)。

ベンチマーク

MMLU
84
HumanEval
92.1
MATH
76.9
gsm8k
93.1

ソース: https://mistral.ai/news/mistral-large-2407

技術仕様

アーキテクチャ

Dense Transformer, Native function calling, 80+ coding languages

プロンプトテンプレート

フォーマット: mistral-large
システムプロンプト:
<s>[SYSTEM_PROMPT] {system_prompt}[/SYSTEM_PROMPT]
ユーザープロンプト:
[INST] {user_message}[/INST]
アシスタントプロンプト:
{assistant_response}</s>
ストップトークン:
</s>

パラメータバリエーション

Mistral Large 2 (2407)(123B)

HuggingFace

2024年7月リリース。123Bパラメータ。MMLU 84.0%、HumanEval 92.1%達成。

VRAM250GB

GGUFファイルは登録されていません

Mistral Large 2.1 (2411)(123B)

HuggingFace

2024年11月リリース。長文理解、システムプロンプト、関数呼び出しを改善。

VRAM250GB

GGUFファイルは登録されていません

家系図

現在のモデル: Mistral Large