Diffusers 文件

ONNX Runtime

Hugging Face's logo
加入 Hugging Face 社群

並獲得增強的文件體驗

開始使用

ONNX Runtime

🤗 Optimum 提供了一個與 ONNX Runtime 相容的 Stable Diffusion pipeline。你需要使用以下命令安裝 🤗 Optimum 以支援 ONNX Runtime

pip install -q optimum["onnxruntime"]

本指南將向您展示如何將 Stable Diffusion 和 Stable Diffusion XL (SDXL) pipeline 與 ONNX Runtime 結合使用。

Stable Diffusion

要載入模型並執行推理,請使用 ORTStableDiffusionPipeline。如果你想載入一個 PyTorch 模型並將其動態轉換為 ONNX 格式,請設定 export=True

from optimum.onnxruntime import ORTStableDiffusionPipeline

model_id = "stable-diffusion-v1-5/stable-diffusion-v1-5"
pipeline = ORTStableDiffusionPipeline.from_pretrained(model_id, export=True)
prompt = "sailing ship in storm by Leonardo da Vinci"
image = pipeline(prompt).images[0]
pipeline.save_pretrained("./onnx-stable-diffusion-v1-5")

批次生成多個提示詞似乎會佔用過多記憶體。在我們研究這個問題時,您可能需要進行迭代而不是批處理。

要離線將 pipeline 匯出為 ONNX 格式並在以後用於推理,請使用 optimum-cli export 命令

optimum-cli export onnx --model stable-diffusion-v1-5/stable-diffusion-v1-5 sd_v15_onnx/

然後執行推理(無需再次指定 export=True

from optimum.onnxruntime import ORTStableDiffusionPipeline

model_id = "sd_v15_onnx"
pipeline = ORTStableDiffusionPipeline.from_pretrained(model_id)
prompt = "sailing ship in storm by Leonardo da Vinci"
image = pipeline(prompt).images[0]

您可以在 🤗 Optimum 文件中找到更多示例,Stable Diffusion 支援文字到影像、影像到影像和影像修復任務。

Stable Diffusion XL

要載入並使用 SDXL 進行推理,請使用 ORTStableDiffusionXLPipeline

from optimum.onnxruntime import ORTStableDiffusionXLPipeline

model_id = "stabilityai/stable-diffusion-xl-base-1.0"
pipeline = ORTStableDiffusionXLPipeline.from_pretrained(model_id)
prompt = "sailing ship in storm by Leonardo da Vinci"
image = pipeline(prompt).images[0]

要將 pipeline 匯出為 ONNX 格式並在以後用於推理,請使用 optimum-cli export 命令

optimum-cli export onnx --model stabilityai/stable-diffusion-xl-base-1.0 --task stable-diffusion-xl sd_xl_onnx/

ONNX 格式的 SDXL 支援文字到影像和影像到影像任務。

< > 在 GitHub 上更新

© . This site is unofficial and not affiliated with Hugging Face, Inc.