Hermes 3 Llama 3.1 8B

NousResearch

llama

MetaのLlama 3.1をファインチューニングしたHermesは、手作業で作成されたデータセットと合成データでさらにトレーニングされています。対話とコード生成に優れています。

モデル情報

モデル

Hermes 3 Llama 3.1 8B

作成者

NousResearch

アーキテクチャ

llama

パラメータ

8B

フォーマット

gguf

ディスク容量

4.92 GB

ダウンロードと実行Hermes 3 Llama 3.1 8B

ダウンロードオプションを表示するには、LM Studioで開いてください。

ターミナルからhermes-3-8bをダウンロードする

LM Studioの開発者向けCLIであるlmsを使用してモデルをダウンロードします。

lms get hermes-3-8b
まだお持ちでない場合は、npx lmstudio install-cliを実行して入手してください。

コードからhermes-3-8bを呼び出す

curl http://localhost:1234/v1/chat/completions \
  -H "Content-Type: application/json" \
  -d '{
    "model": "hermes-3-8b",
    "messages": [
      { "role": "system", "content": "Always answer in rhymes." },
      { "role": "user", "content": "Introduce yourself." }
    ],
    "temperature": 0.7,
    "max_tokens": -1,
    "stream": true
  }'

次のステップ:構築! 🔨

  • 開発者タブを使用して、サーバーを設定し、着信リクエストを確認します。
  • lms log streamを実行して、LLMに送信されたプロンプトを確認します。
  • 🐛 バグはlmstudio-ai/lmstudio-bug-trackerに報告してください。

詳細はこちら