DeepSeek Coder V2 Lite Instruct 4bit mlx

mlx-community

deepseek

DeepSeek-Coder-V2:コードインテリジェンスにおけるクローズドソースモデルの障壁を打破

モデル情報

モデル

DeepSeek Coder V2 Lite Instruct 4bit mlx

作成者

mlx-community

アーキテクチャ

deepseek

パラメータ数

16B

フォーマット

safetensors

ディスク上のサイズ

8.84 GB

ダウンロードと実行DeepSeek Coder V2 Lite Instruct 4bit mlx

ダウンロードオプションを表示するには、LM Studioで開いてください。

ターミナルからdeepseek-coder-v2をダウンロード

LM Studioの開発者向けCLIであるlmsを使用してモデルをダウンロードします。

lms get deepseek-coder-v2
まだインストールしていない場合は、npx lmstudio install-cliを実行してインストールしてください。

コードからdeepseek-coder-v2を呼び出す

curl http://localhost:1234/v1/chat/completions \
  -H "Content-Type: application/json" \
  -d '{
    "model": "deepseek-coder-v2",
    "messages": [
      { "role": "system", "content": "Always answer in rhymes." },
      { "role": "user", "content": "Introduce yourself." }
    ],
    "temperature": 0.7,
    "max_tokens": -1,
    "stream": true
  }'

次のステップ:ビルド!🔨

  • サーバーの設定と受信リクエストの確認には、開発者タブを使用してください。
  • lms log streamを実行して、LLMに送信されたプロンプトを確認してください。
  • 🐛バグの報告はlmstudio-ai/lmstudio-bug-trackerで行ってください。

詳細はこちら