Home / Uncategorized / comfyUI各模型講解

comfyUI各模型講解

這張圖列出了 ComfyUI 或 Stable Diffusion 常見的 模型類型(Model Types),不同的模型有不同的「層級」和「功能」,它們的影響力從 最核心的 AI 模型(Checkpoint)小型輔助調整工具(LoRA、Upscaler、Embedding)

 

這張圖列出了 ComfyUI 或 Stable Diffusion 常見的 模型類型(Model Types),不同的模型有不同的「層級」和「功能」,它們的影響力從 最核心的 AI 模型(Checkpoint)小型輔助調整工具(LoRA、Upscaler、Embedding)

我來用 超級白話 來說明它們的層級高低,並用比喻幫你理解它們的功能! 🚀🎨


📌 層級高低(影響範圍)

🟥 最核心(最大影響)Checkpoint(大模型)
🟧 中層(影響風格)LoRA、LyCORIS、DoRA、Embedding、Aesthetic Gradient、Hypernetwork
🟨 局部調整(控制細節)ControlNet、Poses、Motion、Detection
🟩 後處理 & 優化(改善畫質)VAE、Upscaler、Wildcards、Workflows


🔹 模型類型 & 白話解釋

🟥 1️⃣ 核心大模型(Checkpoint)

👉 📌 Checkpoint(基礎模型)

  • 影響最大,決定 AI 主要的畫風和能力
  • 例如 Stable Diffusion 1.5、SDXL、FLUX、DreamShaper
  • 這些是 「整個 AI 畫圖的大腦」,不同的 Checkpoint 會影響圖片風格(寫實、動漫、概念藝術等)

💡 比喻
「Checkpoint 就像是一位畫家,你選擇不同的畫家,他們的風格就完全不同!」


🟧 2️⃣ 風格調整(中層模型)

👉 📌 LoRA(輕量微調)

  • 讓大模型學習特定風格(例如某個畫家、某種類型的角色)
  • 影響較小,但能快速改變畫風,適合細部微調

👉 📌 LyCORIS(進階版 LoRA)

  • 比 LoRA 更靈活,可同時調整風格和結構
  • 適合 更複雜的風格微調

👉 📌 DoRA(LoRA 的替代方案)

  • NVIDIA 推出的 LoRA 競爭對手,類似但更高效
  • 適用於 大型模型的輕量級微調

👉 📌 Embedding(詞向量調整)

  • 調整 AI 對特定詞彙的理解
  • 例如讓 AI 更準確畫出「賽博朋克」、「黑暗奇幻」等風格

👉 📌 Aesthetic Gradient(美學優化)

  • 讓 AI 按照某種「審美標準」來微調風格
  • 例如 更「電影感」、更「插畫風」

👉 📌 Hypernetwork(超網絡)

  • 比 LoRA 更深度調整畫風,但資源需求較大
  • 適合 專門訓練某種風格的 AI

💡 比喻
「這些工具就像是 Photoshop 的濾鏡和調色板,可以讓圖片更有個性!」


🟨 3️⃣ 局部控制(精確控制 AI 繪畫方式)

👉 📌 ControlNet(精確控制)

  • 能讓 AI 根據你的草圖、姿勢、邊界線來畫圖
  • 例如 姿勢控制(Pose)、深度圖(Depth)、手勢調整

👉 📌 Poses(姿勢控制)

  • 讓 AI 畫出指定姿勢的人物(配合 ControlNet)

👉 📌 Motion(動畫輔助)

  • 讓 AI 可以生成連續的畫面,適合做 AI 動畫

👉 📌 Detection(物件識別)

  • 讓 AI 在生成圖片時識別特定物件,例如人臉、建築物等

💡 比喻
「這些功能就像是畫圖的『尺規』,讓 AI 不會畫歪!」


🟩 4️⃣ 後處理 & 優化(改善畫質)

👉 📌 VAE(影像細節強化)

  • 負責把 AI 生成的潛變量空間(Latent Space)轉回高清圖
  • 影響圖片清晰度、顏色和細節

👉 📌 Upscaler(超解析放大)

  • 讓小圖片變高清,不會糊掉
  • 例如 4x-UltraSharp、ESRGAN、Latent Upscale

👉 📌 Wildcards(隨機變數)

  • 讓 AI 可以生成隨機風格或變化的圖像
  • 適合 批量生圖,或做多種版本的圖片

👉 📌 Workflows(自動化流程)

  • 一鍵執行多個步驟,例如:生成 → 放大 → 修飾 → 輸出
  • 適合 批量處理 AI 圖片

💡 比喻
「這些功能就像是 AI 生成完圖片後,請 Photoshop 幫你修圖 & 優化!」


🎯 結論:這些模型怎麼選?

層級類別影響範圍適合用途
🟥 核心模型Checkpoint影響最大,決定畫風直接選擇 SDXL、SD1.5、FLUX 等
🟧 風格調整LoRA / LyCORIS / DoRA / Embedding / Hypernetwork影響畫風 & 細節讓 AI 畫特定角色、風格、效果
🟨 精準控制ControlNet / Poses / Motion / Detection讓 AI 按照草圖、姿勢畫圖指定人物動作、草圖轉圖片
🟩 畫質優化VAE / Upscaler / Workflows / Wildcards讓 AI 圖片更清晰、更精細提高解析度、批量優化圖片

🔍 你該怎麼用?

如果你想換畫風換 Checkpoint(大模型)
如果你想畫特定角色/風格加 LoRA / LyCORIS / DoRA
如果你想精準控制畫面用 ControlNet / Poses
如果你想提高畫質加 VAE / Upscaler