
這張圖列出了 ComfyUI 或 Stable Diffusion 常見的 模型類型(Model Types),不同的模型有不同的「層級」和「功能」,它們的影響力從 最核心的 AI 模型(Checkpoint) 到 小型輔助調整工具(LoRA、Upscaler、Embedding)。
這張圖列出了 ComfyUI 或 Stable Diffusion 常見的 模型類型(Model Types),不同的模型有不同的「層級」和「功能」,它們的影響力從 最核心的 AI 模型(Checkpoint) 到 小型輔助調整工具(LoRA、Upscaler、Embedding)。
我來用 超級白話 來說明它們的層級高低,並用比喻幫你理解它們的功能! 🚀🎨
📌 層級高低(影響範圍)
🟥 最核心(最大影響) → Checkpoint(大模型)
🟧 中層(影響風格) → LoRA、LyCORIS、DoRA、Embedding、Aesthetic Gradient、Hypernetwork
🟨 局部調整(控制細節) → ControlNet、Poses、Motion、Detection
🟩 後處理 & 優化(改善畫質) → VAE、Upscaler、Wildcards、Workflows
🔹 模型類型 & 白話解釋
🟥 1️⃣ 核心大模型(Checkpoint)
👉 📌 Checkpoint(基礎模型)
- 影響最大,決定 AI 主要的畫風和能力
- 例如 Stable Diffusion 1.5、SDXL、FLUX、DreamShaper
- 這些是 「整個 AI 畫圖的大腦」,不同的 Checkpoint 會影響圖片風格(寫實、動漫、概念藝術等)
💡 比喻:
「Checkpoint 就像是一位畫家,你選擇不同的畫家,他們的風格就完全不同!」
🟧 2️⃣ 風格調整(中層模型)
👉 📌 LoRA(輕量微調)
- 讓大模型學習特定風格(例如某個畫家、某種類型的角色)
- 影響較小,但能快速改變畫風,適合細部微調
👉 📌 LyCORIS(進階版 LoRA)
- 比 LoRA 更靈活,可同時調整風格和結構
- 適合 更複雜的風格微調
👉 📌 DoRA(LoRA 的替代方案)
- NVIDIA 推出的 LoRA 競爭對手,類似但更高效
- 適用於 大型模型的輕量級微調
👉 📌 Embedding(詞向量調整)
- 調整 AI 對特定詞彙的理解
- 例如讓 AI 更準確畫出「賽博朋克」、「黑暗奇幻」等風格
👉 📌 Aesthetic Gradient(美學優化)
- 讓 AI 按照某種「審美標準」來微調風格
- 例如 更「電影感」、更「插畫風」
👉 📌 Hypernetwork(超網絡)
- 比 LoRA 更深度調整畫風,但資源需求較大
- 適合 專門訓練某種風格的 AI
💡 比喻:
「這些工具就像是 Photoshop 的濾鏡和調色板,可以讓圖片更有個性!」
🟨 3️⃣ 局部控制(精確控制 AI 繪畫方式)
👉 📌 ControlNet(精確控制)
- 能讓 AI 根據你的草圖、姿勢、邊界線來畫圖
- 例如 姿勢控制(Pose)、深度圖(Depth)、手勢調整
👉 📌 Poses(姿勢控制)
- 讓 AI 畫出指定姿勢的人物(配合 ControlNet)
👉 📌 Motion(動畫輔助)
- 讓 AI 可以生成連續的畫面,適合做 AI 動畫
👉 📌 Detection(物件識別)
- 讓 AI 在生成圖片時識別特定物件,例如人臉、建築物等
💡 比喻:
「這些功能就像是畫圖的『尺規』,讓 AI 不會畫歪!」
🟩 4️⃣ 後處理 & 優化(改善畫質)
👉 📌 VAE(影像細節強化)
- 負責把 AI 生成的潛變量空間(Latent Space)轉回高清圖
- 影響圖片清晰度、顏色和細節
👉 📌 Upscaler(超解析放大)
- 讓小圖片變高清,不會糊掉
- 例如 4x-UltraSharp、ESRGAN、Latent Upscale
👉 📌 Wildcards(隨機變數)
- 讓 AI 可以生成隨機風格或變化的圖像
- 適合 批量生圖,或做多種版本的圖片
👉 📌 Workflows(自動化流程)
- 一鍵執行多個步驟,例如:生成 → 放大 → 修飾 → 輸出
- 適合 批量處理 AI 圖片
💡 比喻:
「這些功能就像是 AI 生成完圖片後,請 Photoshop 幫你修圖 & 優化!」
🎯 結論:這些模型怎麼選?
| 層級 | 類別 | 影響範圍 | 適合用途 |
|---|---|---|---|
| 🟥 核心模型 | Checkpoint | 影響最大,決定畫風 | 直接選擇 SDXL、SD1.5、FLUX 等 |
| 🟧 風格調整 | LoRA / LyCORIS / DoRA / Embedding / Hypernetwork | 影響畫風 & 細節 | 讓 AI 畫特定角色、風格、效果 |
| 🟨 精準控制 | ControlNet / Poses / Motion / Detection | 讓 AI 按照草圖、姿勢畫圖 | 指定人物動作、草圖轉圖片 |
| 🟩 畫質優化 | VAE / Upscaler / Workflows / Wildcards | 讓 AI 圖片更清晰、更精細 | 提高解析度、批量優化圖片 |
🔍 你該怎麼用?
✅ 如果你想換畫風 → 換 Checkpoint(大模型)
✅ 如果你想畫特定角色/風格 → 加 LoRA / LyCORIS / DoRA
✅ 如果你想精準控制畫面 → 用 ControlNet / Poses
✅ 如果你想提高畫質 → 加 VAE / Upscaler