LCM 是什麼
在人工智慧領域,影像生成技術一直是研究的熱點。然而,儘管取得了顯著進展,現有技術如 Stable Diffusion 等在生成高質量影像時仍面臨速度瓶頸。多步迭代取樣過程不僅耗時,而且增加了推理成本,限制了這些技術在實時應用場景中的潛力。
為了解決上述問題,清華大學交叉資訊研究院的研究者們提出了一種創新的模型——Latent Consistency Models(潛在一致性模型),簡稱 LCM。與傳統的迭代求解不同,LCM 採用直接的單步求解方法,理論上能夠在單步內生成圖片,顯著減少了生成時間。LCM 能夠實現 1~4 步內生成高質量圖片,相比現有技術在實際推理時間上實現了約 4 倍的加速。
如何在 ComfyUI 中使用
將以下圖片拖入 ComfyUI 頁面
匯入後工作流如下圖:
需要注意的是 cfg 應使用很小的值,可以 1~3
Sample 使用 lcm, scheduler 使用 sgm_uniform 或者 simple
Steps 設定 5~8 即可
模型下載
官方地址:
SDXL: https://huggingface.co/latent-consistency/lcm-lora-sdxl
SD1.5: https://huggingface.co/latent-consistency/lcm-lora-sdv1-5
夸克網盤:
SDXL+SD1.5: https://pan.quark.cn/s/cdb9e71513ce