Mistral 7B v0.3

MistralAI

mistral

最も人気のあるオープンソースLLMの一つであるMistralの7B Instructモデルは、速度、サイズ、性能のバランスが優れており、汎用的な日常使いに最適です。

モデル情報

モデル

Mistral 7B v0.3

作成者

MistralAI

アーキテクチャ

mistral

パラメータ数

7B

フォーマット

gguf

ディスク上のサイズ

4.37 GB

ダウンロードと実行Mistral 7B v0.3

ダウンロードオプションを表示するには、LM Studioで開いてください。

ターミナルからmistral-7bをダウンロードする

LM Studioの開発者用CLIであるlmsを使用してモデルをダウンロードします。

lms get mistral-7b
まだインストールしていない場合は、npx lmstudio install-cliを実行してインストールしてください。

コードからmistral-7bを呼び出す

curl https://127.0.0.1:1234/v1/chat/completions \
  -H "Content-Type: application/json" \
  -d '{
    "model": "mistral-7b",
    "messages": [
      { "role": "system", "content": "Always answer in rhymes." },
      { "role": "user", "content": "Introduce yourself." }
    ],
    "temperature": 0.7,
    "max_tokens": -1,
    "stream": true
  }'

次のステップ:構築!🔨

  • 開発者タブを使用してサーバーを構成し、受信リクエストを確認してください。
  • lms log streamを実行して、LLMに送信されたプロンプトを確認します。
  • 🐛 バグはlmstudio-ai/lmstudio-bug-trackerで報告してください。

詳細情報