ONNX Runtime

🤗 Optimum 提供了一个与 ONNX Runtime 兼容的 Stable Diffusion 管道。你需要使用以下命令安装 🤗 Optimum 以获得 ONNX Runtime 支持：

pip install -q optimum["onnxruntime"]

本指南将向你展示如何使用 ONNX Runtime 与 Stable Diffusion 和 Stable Diffusion XL (SDXL) 管道。

Stable Diffusion

要加载并运行推理，请使用 [~optimum.onnxruntime.ORTStableDiffusionPipeline]. 如果你想加载 PyTorch 模型并将其动态转换为 ONNX 格式，请设置 export=True：

from optimum.onnxruntime import ORTStableDiffusionPipeline

model_id = "stable-diffusion-v1-5/stable-diffusion-v1-5"
pipeline = ORTStableDiffusionPipeline.from_pretrained(model_id, export=True)
prompt = "sailing ship in storm by Leonardo da Vinci"
image = pipeline(prompt).images[0]
pipeline.save_pretrained("./onnx-stable-diffusion-v1-5")

要离线将管道导出为 ONNX 格式并在以后用于推理， 请使用 optimum-cli export 命令：

optimum-cli export onnx --model stable-diffusion-v1-5/stable-diffusion-v1-5 sd_v15_onnx/

然后执行推理（你不需要再次指定 export=True）：

from optimum.onnxruntime import ORTStableDiffusionPipeline

model_id = "sd_v15_onnx"
pipeline = ORTStableDiffusionPipeline.from_pretrained(model_id)
prompt = "sailing ship in storm by Leonardo da Vinci"
image = pipeline(prompt).images[0]

你可以在 🤗 Optimum 文档 中找到更多示例，Stable Diffusion 支持文本到图像、图像到图像和修复。

Stable Diffusion XL

要加载并使用 SDXL 进行推理，请使用 [~optimum.onnxruntime.ORTStableDiffusionXLPipeline]:

from optimum.onnxruntime import ORTStableDiffusionXLPipeline

model_id = "stabilityai/stable-diffusion-xl-base-1.0"
pipeline = ORTStableDiffusionXLPipeline.from_pretrained(model_id)
prompt = "sailing ship in storm by Leonardo da Vinci"
image = pipeline(prompt).images[0]

要将管道导出为 ONNX 格式并在以后用于推理，请使用 optimum-cli export 命令：

optimum-cli export onnx --model stabilityai/stable-diffusion-xl-base-1.0 --task stable-diffusion-xl sd_xl_onnx/

ONNX 格式的 SDXL 支持文本到图像和图像到图像。