模型來源#

Xinference 支援從不同的來源下載各種模型。

HuggingFace#

Xinference 預設直接從 Hugging Face 官方模型倉庫 下載所需的模型。

備註

如果你的網路無法連接到 HuggingFace ,你可以透過環境變數指定 HuggingFace 鏡像網站:HF_ENDPOINT=https://hf-mirror.com

ModelScope#

當 Xinference 偵測到系統語言設定為「簡體中文」時,會將模型下載來源設為 ModelScope

你也可以透過手動設定環境變數 XINFERENCE_MODEL_SRC=modelscope 來實現這一點。

請在模型的詳情頁面上查看它是否支援從 ModelScope 進行下載。如果一個模型支援從 ModelScope 下載,模型資訊中的 Model Hubs 這一項會包含 ModelScope。