[AI繪圖] 第二章: Stable Diffusion webUI模型下載

前言

使用上一章的方法安裝好Stable Diffusion後..就可以開始算圖了,但是為了有更多風格,及方便起見,有一些擴充功能建議也一併安裝進去..

Sd_civitai_extension:未來有不少風格會由Civitai網站下載,這個Extension可以把該風格的代表圖片幫你下載,這樣使用時就會更方便一點。

安裝方式和安裝中文界面方法一樣,使用擴充功能的從網址安裝,在網址處輸入

https://github.com/civitai/sd_civitai_extension

再按安裝鈕,等一段時間安裝好..到已安裝頁面,按下應用並重新啟用界面,就可以了!

基本上,裝好之後..最好重新跑一次Stable Diffusion webUI,注意畫線這行

如果看到 python-soketio[client] 沒安裝的話,可以到 Stable Dffusion webUI下, 用下面的指令安裝它即可

pip install "python-socketio[client]"

記得裝好後重新啟動webUI,其實不管裝什麼Extension,裝完後都建議關掉再重新啟動webUI比較不會有問題

各種風格下載

Stable Diffusion最方便的地方就在很多神人開發了很多各式各樣的風格模型讓大家可以使用,當然自己也可以訓練出自己的風格模型(這個未來會再專章介紹),而目前最方便的地方就是Civitai網站了…

https://civitai.com/

進入網站後可以用Google帳號登入,方便瀏覽及下載

基本上就是想要什麼模組..點進去就能下載,不過在下載前..可以看到這些模組左上角有一些文字,像LORA, CHECKPOINT… 等等。這代表什麼意思呢?現在就來說明一下..

Checkpoint:一般來說這類型的檔案算大模型,下載下來的檔案都很大,基本上都是GB起跳,常見的檔案大小有2G, 4G, 7G…等等,這些大模型就直接影響整個出圖的主要風格,而下載下來的檔案有幾種不同的副檔名(.safetensors,.ckpt,等) ,雖然副檔名有所不同,但基本上都是相同的功能,所以下載下來之後,要放在 models\Stable-diffusion資料夾下。然後使用時,是在webUI左上角來選擇。

Textual Inversion:也稱為Embedding模型,這些檔案都很小,通常只有幾十KB而已,主要是畫風和人物描寫,下載下來之後,要放在embeddings資料夾下(注意:和CheckPoint、LoRA或VAE不一樣哦!),副檔名通常是.pt,使用時要直接在prompt內下檔名,例如下載下來的檔案是Style-Winter.pt,要使用時..就在prompt內加入Style-Winter這個詞句就可以套用。

LoRA:這個應該是除了Checkpoint外最常用的模型了,主要是描述人物為主,要產生不同的人種,一般都會用這種模型檔案,檔案大小大約幾十至幾百MB,常看到的副檔名為 .safetensors、.pt、.ckpt 等,下載下來之後要把檔案放在 models\lora 資料夾下,使用時和Textual Inversion類似,可以直接輸入檔名在prompt內,或者用<LoRA名:權重>來指定。

VAE:在早期SD1.5,因為出圖後Model的人臉(尤其是眼睛)會不太自然,所以就會有這類的VAE模型來補足,另外有時出圖的色彩不是那麼討喜,也可以用VAE模型來調整,可以把它當成是一種濾鏡來用,目前在SD2.0時用到的機會比較少就是,副檔名通常是.ckpt,下載後放到 models\VAE 資料夾下,並在Setting裡設置它,關於我用的這個VAE可以到這裡下載,記得設置完要儲存設定後再重新載入(最好重開)。

個人常用的模型檔(Checkpoint)

其實各式模型檔超級多,怎麼也下載不完,除了Civitai網站外,還有最大的Hugging Face網站可以找到各種風格模型檔案,在這裡有幾個大家很常用的模型檔下載點可以先下載下來玩一下,未來想要什麼模型再去這2個網站上找就行,下面是我常用的幾個模型檔。

ChilloutMix:(類型: Checkpoint)

如果想產生真人般的相片,可以使用這個模型,主要是亞洲東方臉孔,可以在Civitai下載,檔案大小為3.97G。如果想得到更符合人體解剖學和更有細節的話, 可以在下載頁面拉到下方找到另一個名為ChilloutMix-Ni的檔案,大小大約7.2G。

LOFI:(類型: Checkpoint)

這也是另一個可以產生真人相片的模型,可以在Civitai下載,檔案大小約為2.2G。

Counterfeit-V2.5:(類型: Checkpoint)

如果想繪製動漫圖片,在Civitai上有相當多可以下載,這個是其中之一,大小大約3.97G。

MeinaMix:(類型: Checkpoint)

另一個動漫模型,目前已到第8版,下載大約3.22G。

Dreamlike Photoreal 2.0:(類型: Checkpoint)

包羅萬象的模型都在裡面,還蠻好用的!!下載大小大約1.99G。

上面大都是Checkpoint模型(檔案都很大),另外也很常用的是LoRA和Textual Inversion,這類大部份都有點個人色彩,很多是針對某個特定的人或物去做訓練學習來的,使用時要注意是否有肖像權的問題(如用在商業上)。

這類型更多,可以直接到Civitai網站下載即可,可以用右上角的過濾圖示只列出LoRA或是Textual Inversion的模型,方便選擇。

下面這幾個是我有下載使用的LoRA模型:

Liyuu LoRA墨心 MoXinStudio Ghibli Style LoRARosè BlackpinkCute_girl_mix4Korean Doll LikenesssTaiwan Metal Steel Building Likeness

和Textual Inversion模型:Autumn StyleWinter Style

模型載入/使用

在最近的webUI有個方便的功能,就是把CheckpointTextual Inversion、和LoRA 放在一起方便選擇使用!進去畫面之後,點選這個按鈕,就可以叫出縮圖(如果有安裝文章開頭的Sd_civitai_extension, 就會自動下載縮圖),如果有中文化的話,那個 “模型權重存檔點” 就是Checkpoint,可以直接點圖片切換,基本上和使用左上角的選單切換是一樣的,但看的到圖總是方便些。

而Testual Inversion和LoRA點了圖片就會自動在Prompt上加入該模型的Tag,而LoRA的話,會自動將權重設為1,有需要再去調整即可!

要注意的是,點這些模型並不會自動幫你輸入逗點,要記得在不同Tag間要有半型逗點哦!!

用了台灣街景的LoRA..有沒有很有台味啊!!