← すべてのモデル

Phi 3 mini 4k instruct 4bit

•

mlx-community

phi

Phi-3-Mini-4K-Instructは、38億パラメータの軽量で最先端のオープンモデルであり、Phi-3データセットでトレーニングされています。このデータセットには、合成データと、高品質で推論に特化した公開されているWebサイトデータが含まれています。

モデル情報

モデル

Phi 3 mini 4k instruct 4bit

作成者

mlx-community

リポジトリ

🤗 mlx-community/Phi-3-mini-4k-instruct-4bit↗

アーキテクチャ

phi

パラメータ数

3.8B

フォーマット

safetensors

ディスク上のサイズ

約 2.15 GB

ダウンロードと実行Phi 3 mini 4k instruct 4bit

ダウンロードオプションを表示するには、LM Studioで開いてください。

ターミナルからphi-3-mini-4kをダウンロードする

LM Studioの開発者向けCLIであるlmsを使用してモデルをダウンロードします。

lms get phi-3-mini-4k
まだお持ちでない場合は、npx lmstudio install-cliを実行して入手してください。

コードからphi-3-mini-4kを呼び出す

curl http://localhost:1234/v1/chat/completions \
  -H "Content-Type: application/json" \
  -d '{
    "model": "phi-3-mini-4k",
    "messages": [
      { "role": "system", "content": "Always answer in rhymes." },
      { "role": "user", "content": "Introduce yourself." }
    ],
    "temperature": 0.7,
    "max_tokens": -1,
    "stream": true
  }'

次のステップ：構築！ 🔨

  • 開発者タブを使用して、サーバーを設定し、受信リクエストを確認します。
  • lms log streamを実行して、LLMに送信されたプロンプトを確認します。
  • 🐛 lmstudio-ai/lmstudio-bug-trackerにバグを報告してください。

詳細はこちら