Gen師系列 | 《Stable Diffusion 無臉似顏繪 LoRA 訓練》- 下●

《Stable Diffusion 無臉似顏繪 LoRA 訓練》- 0 技術需求工作流

上一篇講到，咩叫Lora，同佢係Stable Diffusion入面扮演咩角色

今次講下，點樣訓練自己鍾意既 LoRA 風格而點解特登做一篇長教學講 Gen圖既 LoRA 訓練，係因為透過呢個過程都可以帶出同理解更多所謂 AI 既本質

簡單講下，我目前用落最簡單，最冇技術需求既 LoRA 訓練工作流程：

Step 1. 訓練資料預備 -- 收集相同風格／類別既圖片

Step 2. 用 Civitai LoRA Trainer -- 直接係網上做訓練

Step 3. 測試成果

Step 1. 預備訓練資料

所有既呢D AI 模型訓練，無論係文字，數據，定視覺都不外乎一個核心概念，就係

搵規律 <<

正如我成日講, AI 雖然個名叫做智能但佢其實並冇真正既智能

我地做緊既野，其實就係要教佢，理解更多呢個世界係點至於點教，其中一個方法就係

俾大量有類近既材料佢，同佢講有「特質A」「特質B」「特質C」既就係『類別一』有「特質D」「特質E」「特質F」既就係『類別二』 . . 之餘此類

帶返返黎 LoRA 訓練首先我地要做既係預備一D 相同『類別』圖片

呢D 『類別』可以係

等等

你可以用唔同方法準備呢D 相同『類別』既圖

例如

自己網上收集 , 當然要專重返copy right 或者整理自己既作品 , 自己影既相之類

或者第二個方法係MJ -> LoRA

以我自己為例，我會先用Midjourney 既vary 功能，大量Gen 相近風格既素材以無臉似顏繪作為一個例子就係一個風格

下圖係我係MJ 大量Gen 既無臉繪套圖我Gen 左差不多200 多張最後揀大約100張做下一步訓練

如果係第一次試玩既朋友，自己預備素材大約準備20 - 50 張都可以

預備好，將佢地放係同一個file 備用就可以做下一步

Step 2. Civitai LoRA Trainer

第二步係利用現有網上平台去做 LoRA 訓練

civitai.com

Civitai 係其中一個最大最出名既 AI Gen 圖sharing 平台, 上面有好多人免費share 自己既訓練成果公開俾人用用Civitai 黎train LoRA -

好處：唔洗setup , 唔洗電腦勁壞處：佢成本俾自己setup貴，大約 8-10蚊 train 一個 LoRA 模型

所以先衡量自己 preference, 再選擇方法我既話我傾向當玩具用錢買時間，去試多D唔同既野

開左 Civitai account 就可以用佢"Train a model" 既功能 (圖一)

佢會step by step 咁 lead 你，揀返你想訓練既係人物 , 物品 , 定風格 (圖二)

再將你預備好，save 左準備訓練圖 , upload 上去基本上 , 你所有training 既setting 唔洗郁, default 都可以主要留意返 label tagging 呢個stage 一定要揀 "auto tag" , 等系統幫你做最重要 tagging 既步驟 (圖三)

最後揀返SD 1.5 或 SDXL 作為訓練base , 對應返你訓練素材, 相就揀Realistic , 插畫就揀Anime 我自己經驗係真實圖片揀 SDXL / 插畫揀 SD 1.5 效果比較好

(圖四)

最後撳submit , 佢會係後台自動幫你run LoRA training 大約30分鐘 - 一個鐘到

完成後佢會send email 通知你到時上返Civitai 可以直接download 自己既 LoRA (見下圖)

就可以應用係唔同既SD 生成過程

下篇再講埋Step 3 , 點樣用最少既setup run SD 去測試自己既 LoRA 成果

p.s. 有興趣既私補同學都可以私下聯絡我我地係私補session step by step 一齊做都可以