**SD-22 ControlNet的應用 IP-Adapter** (https://hackmd.io/_uploads/r1qGa6deC.png) **IP-Adapter官網** https://huggingface.co/h94/IP-Adapter ControlNet中的IP-Adapter是一個微調的模型 作法類似用一張參考圖來影響AI運算 ![image](https://hackmd.io/_uploads/BkKaC3uxA.png) ![image](https://hackmd.io/_uploads/By_RC2_l0.png) **IP-Adapter 預處理模型下載 分SD1.5 & SDXL** 1. https://huggingface.co/libsgo/clip/blob/main/clip_h.pth ![image](https://hackmd.io/_uploads/SkEtGr6kJx.png) clip_h.pth(for SD1.5) 1. https://huggingface.co/salmonrk/clip_vision/blob/main/clip_g.pth ![image](https://hackmd.io/_uploads/H1_qmBpJ1g.png) clip_g.pth(for SDXL) 預處理模型下載後 二個模型都放在: D:\**\SDlocal\stable-diffusion-webui\extensions\sd-webui-controlnet\annotator\downloads\clip_vision **IP-Adapter模型下載網址 分SD1.5 & SDXL** https://huggingface.co/h94/IP-Adapter/tree/main/models IP-adapter有分SD 1.5 的 IP 轉接器 SDXL 1.0 的 IP 轉接器 模型都有點區別 如果設備可以 就都下載 若不行就擇一 下載後模型放在: D:\SD-files\SDlocal\stable-diffusion-webui\extensions\sd-webui-controlnet\models **範例-Lobby空間** 底圖 ![lobby1](https://hackmd.io/_uploads/HyF3rpOx0.jpg) prompt:masterpiece,best quality,modern interior,lobby,indoor,architecture photo, **使用二個 ControlNet** Model: realisticVisionV60B1_v60B1VAE 第一個使用ControlNet 的 IP-Adapter 通常控制權重0.1~0.3即可 start and end 的參數也可以改變效果 ![螢幕擷取畫面 2024-04-14 094427](https://hackmd.io/_uploads/BJOGH2deR.png) 第一個使用ControlNet 的lineart 但底圖是lineart產生的線條圖 預處理器選擇none ![螢幕擷取畫面 2024-04-14 104245](https://hackmd.io/_uploads/H1kpGpdx0.png) 檢查是否選用正確的預處理器 ip-adapter_clip_h (Using preprocessor: ip-adapter_clip_sd15) ![image](https://hackmd.io/_uploads/rJ9852dx0.png) ![00000-150960653](https://hackmd.io/_uploads/Sy5bB2_gA.jpg) ![00004-1800768824](https://hackmd.io/_uploads/ryjA8ndx0.jpg) ![00005-2699855059](https://hackmd.io/_uploads/rJ3gvhdlA.jpg) ![00008-2272898517](https://hackmd.io/_uploads/BJdIvhulR.jpg) ![00009-379937997](https://hackmd.io/_uploads/Syj4dhulC.jpg) ![00013-2348921334](https://hackmd.io/_uploads/H1ftF3deA.jpg) ![00059-1719181000](https://hackmd.io/_uploads/H1IMtbKlA.jpg) ![00015-2683598061](https://hackmd.io/_uploads/By2uih_xA.jpg) V1.8版 直接按此標籤 就有直接放大2倍的功能 解析度及小細節直接加大 ![image](https://hackmd.io/_uploads/r1PeT3dgC.png) **作業二** 用室內lobby為底圖(上圖) 另外可自行找一張圖片使用IP-adapter 進行AI運算 至少AI四張圖+圖片資訊+自行找的圖片 存成檔案(PDF)以名字(學號)命名 放至學校Moodle 交圖時間截止後 電腦會自動分配群組 請大家進行互評-建議或讚美!(重點是看看同學做的 會給你一些不同的學習) 互評時間截止後 系統即自動關閉 作業一 沒有完成的五位同學 請記得做喔!!下周上課會挑幾位同學做學習分享