使用 LCM 加速生圖

Tooosky發表於2024-07-10

LCM 是什麼

在人工智慧領域,影像生成技術一直是研究的熱點。然而,儘管取得了顯著進展,現有技術如 Stable Diffusion 等在生成高質量影像時仍面臨速度瓶頸。多步迭代取樣過程不僅耗時,而且增加了推理成本,限制了這些技術在實時應用場景中的潛力。

為了解決上述問題,清華大學交叉資訊研究院的研究者們提出了一種創新的模型——Latent Consistency Models(潛在一致性模型),簡稱 LCM。與傳統的迭代求解不同,LCM 採用直接的單步求解方法,理論上能夠在單步內生成圖片,顯著減少了生成時間。LCM 能夠實現 1~4 步內生成高質量圖片,相比現有技術在實際推理時間上實現了約 4 倍的加速。

如何在 ComfyUI 中使用

將以下圖片拖入 ComfyUI 頁面

匯入後工作流如下圖:

需要注意的是 cfg 應使用很小的值,可以 1~3

Sample 使用 lcm, scheduler 使用 sgm_uniform 或者 simple

Steps 設定 5~8 即可

模型下載

官方地址:

SDXL: https://huggingface.co/latent-consistency/lcm-lora-sdxl

SD1.5: https://huggingface.co/latent-consistency/lcm-lora-sdv1-5

夸克網盤:

SDXL+SD1.5: https://pan.quark.cn/s/cdb9e71513ce

相關文章