InternLM 2.5 20B

InternLM

internlm2

InternLM 2.5 は、全体的に強力な推論機能と、開発者向けのツール利用を提供します。24GB GPU を搭載した環境に最適なサイズです。

モデル情報

モデル

InternLM 2.5 20B

作成者

InternLM

アーキテクチャ

internlm2

パラメータ数

20B

フォーマット

gguf

ディスク上のサイズ

7.55 GB

ダウンロードと実行InternLM 2.5 20B

LM Studio で開き、ダウンロードオプションを表示

ターミナルから internlm2.5-20b をダウンロード

lms — LM Studio の開発者向け CLI を使用してモデルをダウンロードします。

lms get internlm2.5-20b
まだお持ちでない場合は、npx lmstudio install-cli を実行して入手してください。

コードから internlm2.5-20b を呼び出す

curl http://localhost:1234/v1/chat/completions \
  -H "Content-Type: application/json" \
  -d '{
    "model": "internlm2.5-20b",
    "messages": [
      { "role": "system", "content": "Always answer in rhymes." },
      { "role": "user", "content": "Introduce yourself." }
    ],
    "temperature": 0.7,
    "max_tokens": -1,
    "stream": true
  }'

次のステップ: 構築! 🔨

  • 開発者タブを使用してサーバーを設定し、受信リクエストを確認します。
  • lms log stream を実行して、LLM に送信されたプロンプトを確認します。
  • 🐛 バグは lmstudio-ai/lmstudio-bug-tracker に報告してください。

詳細はこちら