前言

要執(zhí)行 ControlNet tile upscale：

您想使用 Stable Diffusion 創(chuàng)建包含大量細(xì)節(jié)的大型圖像嗎？您將需要使用升頻器。在本文中，您將學(xué)習(xí) 3 種放大圖像的方法。

• 人工智能升級(jí)器
• 標(biāo)清高檔
• ControlNet瓷磚高檔

您將看到比較并了解這些方法的優(yōu)缺點(diǎn)。

如果您不熟悉該主題，則可能需要學(xué)習(xí)升頻器的基礎(chǔ)知識(shí)。

軟件

我們將使用 AUTOMATIC1111 Stable Diffusion GUI 來(lái)執(zhí)行放大。您可以在Windows、 Mac或 Google Colab上使用此 GUI 。

對(duì)于最后一種方法，我們需要Ultimate SD Upscale和ControlNet擴(kuò)展。

Colab 用戶

如果您使用本站提供的Colab Notebook，您只需在啟動(dòng)筆記本前選擇ControlNet和Ultimate SD Upscale擴(kuò)展。

Windows 或 Mac 用戶

安裝 Ultimate SD 高級(jí)擴(kuò)展

Ultimate SD upscale是一個(gè)擴(kuò)展，提供類似于內(nèi)置SD Upscale腳本的功能，但具有一些高級(jí)選項(xiàng)。

在 AUTOMATIC1111 中安裝 Ultimate SD upscale：

1. 導(dǎo)航到**“擴(kuò)展”**頁(yè)面。

2. 選擇從 URL 安裝選項(xiàng)卡。

3. 將以下 URL 放入擴(kuò)展存儲(chǔ)庫(kù)字段的 URL 中。

https://github.com/Coyote-A/ultimate-upscale-for-automatic1111

4. 單擊安裝按鈕。

5. 等待擴(kuò)展安裝成功的確認(rèn)消息。

6. 重新啟動(dòng) AUTOMATIC1111。

如果安裝成功，您應(yīng)該會(huì)在img2img頁(yè)面底部的腳本下拉菜單中看到Ultimate SD upscale。

安裝 ControlNet 擴(kuò)展

ControlNet是一個(gè)擴(kuò)展，可讓您額外控制圖像生成。請(qǐng)參閱ControlNet 教程以了解更多信息。

在 AUTOMATIC1111 中安裝 Ultimate SD upscale：

1. 導(dǎo)航到**“擴(kuò)展”**頁(yè)面。

2. 選擇從 URL 安裝選項(xiàng)卡。

3. 將以下 URL 放入擴(kuò)展存儲(chǔ)庫(kù)字段的 URL 中。

https://github.com/Mikubill/sd-webui-controlnet

4. 單擊安裝按鈕。

5. 等待說(shuō)明擴(kuò)展已安裝的確認(rèn)消息。

6. 重新啟動(dòng) AUTOMATIC1111。

7. 訪問(wèn)ControlNet 模型頁(yè)面。

8. 下載所有模型文件（文件名以 結(jié)尾.pth）。如果您不想全部下載，您可以只下載_tile本教程的瓦片模型（結(jié)尾為 ）。

9. 將模型文件放入 ControlNet 擴(kuò)展的模型目錄中。

穩(wěn)定擴(kuò)散-webui\extensions\sd-webui-controlnet\models

10. 重新啟動(dòng) AUTOMATIC1111。

您應(yīng)該在 txt2img 頁(yè)面上看到 ControlNet 部分。瓷磚模型應(yīng)該可以在模型下拉菜單中進(jìn)行選擇。如果看不到菜單，請(qǐng)按菜單旁邊的刷新按鈕。

輸入圖像

我們將使用 Stable Diffusion 生成的以下圖像。

型號(hào)：Lyriel v1.5

提示與否定提示：

“最后一舞”：在一個(gè)盛大的舞廳里，我們命運(yùn)多舛的戀人共舞。當(dāng)他們跳華爾茲時(shí)，時(shí)間似乎變慢了，迷失在彼此的眼中。他們不知道，這將是命運(yùn)介入之前他們?cè)谝黄鸬淖詈髸r(shí)刻。

（我從 GPT-4 得到了這個(gè)提示）

毀容的，變形的

原始尺寸非常小（768×512 像素）。讓我們將其放大 4 倍至 3,072×2,048 像素。我們將使用三種放大方法進(jìn)行測(cè)試。

1. 人工智能升級(jí)器
2. 標(biāo)清高檔
3. ControlNet瓷磚高檔

方法一：AI Upscaler

AI Upscaler是一種AI 模型，經(jīng)過(guò)訓(xùn)練可以放大照片并填充細(xì)節(jié)，從而使圖像保持清晰。這是在 AUTOMATIC1111 中放大圖像的基本方法。

1. 在 AUTOMATIC1111 中，導(dǎo)航到Extras頁(yè)面。

2. 將圖像上傳到圖像畫(huà)布。

3. 將Resize設(shè)置為 4。（將圖像放大 4 倍。）

4. 在Upscaler 1中選擇一個(gè) upscaler 。我使用了Universal Upscaler v2，但你可以使用任何一個(gè)。（請(qǐng)參閱此處下載和安裝新的升級(jí)器的說(shuō)明）

5. 點(diǎn)擊生成。

片刻之后，您將在右側(cè)的輸出窗口中看到放大后的圖像。

讓我們看看進(jìn)展如何。我們先來(lái)看看裙子。

它在忠實(shí)地填充裙子的細(xì)節(jié)方面做得不錯(cuò)。

但是這位女士的臉需要一些超出這個(gè)升級(jí)器所能做的增強(qiáng)。

當(dāng)然，你可以開(kāi)啟人臉修復(fù)，它使用另一個(gè)AI模型來(lái)修復(fù)人臉。但是因?yàn)槟Ｐ蜎](méi)有用這種特殊的風(fēng)格進(jìn)行訓(xùn)練，它可能會(huì)引入偽像并使面部看起來(lái)不自然。

方法二：標(biāo)清高檔

有沒(méi)有什么方法可以不使用面部修復(fù)來(lái)修復(fù)面部？

首先，這張臉有點(diǎn)像原始圖像中的那張臉。這就是為什么我們?cè)跀U(kuò)大規(guī)模時(shí)得到了我們所得到的。

但是，如果您接受更多更改，因?yàn)樵紙D像無(wú)論如何都是計(jì)算機(jī)生成的呢？您可以執(zhí)行一輪額外的圖像到圖像以重新生成細(xì)節(jié)。

這正是 SD 高檔腳本所做的。

這種方法的好處是

• 可以使用相同的模型和提示生成新的放大細(xì)節(jié)。
• 移除由 AI upscaler 引入的偽影。

您可以使用AUTOMATIC1111 中 img2img 頁(yè)面上的SD Upscale腳本輕松地同時(shí)執(zhí)行 AI upscaling 和 SD img2img。該腳本在小塊中執(zhí)行穩(wěn)定擴(kuò)散 img2img，因此它適用于低 VRAM GPU 卡。

分步指南

按照以下步驟執(zhí)行 SD 升級(jí)。

1. 在img2img頁(yè)面，將圖片上傳到 Image Canvas。

2.輸入原提示和否定提示。如果您沒(méi)有原始提示，您可以使用“非常詳細(xì)”。

備選方案 1：如果您剛剛在txt2img頁(yè)面上生成圖像，請(qǐng)單擊發(fā)送到 img2img按鈕。圖像和提示將自動(dòng)填充。

備選方案 2：如果您將生成的圖像保存在本地存儲(chǔ)中，則可以將其上傳到PNG 信息頁(yè)面。您應(yīng)該會(huì)看到生成此圖像的所有信息，包括提示和模型。單擊發(fā)送到 img2img。圖像和提示將自動(dòng)填充。

3. 在穩(wěn)定擴(kuò)散檢查點(diǎn)下拉菜單中，選擇生成此圖像時(shí)最初使用的模型

4. 將圖像寬度和高度都設(shè)置為 512。這是用于 SD 放大的圖塊大小。

5. 將去噪強(qiáng)度設(shè)置為 0.3。較高的值將導(dǎo)致更多的細(xì)節(jié)和恢復(fù)，但不應(yīng)將其設(shè)置為高于 0.4。否則，您會(huì)看到偽影。

5. 在img2img頁(yè)面的按鈕附近找到腳本下拉菜單。選擇標(biāo)清高檔。

6. 將比例因子設(shè)置為 4 以放大 4 倍。

7. 選擇一個(gè)升頻器。我選擇了與之前方法相同的升頻器。但如果沒(méi)有，您可以選擇 ESRGAN 或 R-ESRGAN。

8. 單擊生成。

結(jié)果

這就是我得到的。

得益于 Stable Diffusion img2img，硬木地板有很多細(xì)節(jié)。

現(xiàn)在讓我們比較一下臉。

不錯(cuò)的改進(jìn)！SD upscale 在不引入偽像的情況下修復(fù)面部。

讓我們檢查一下這件衣服，好嗎？

他們也有更多的細(xì)節(jié)。

您可以嘗試使用以下參數(shù)。

• 采樣步長(zhǎng)：設(shè)置為更高的值，例如 50 – 100，可以獲得更多的細(xì)節(jié)。
• 抽樣法。細(xì)節(jié)可能不同，尤其是祖先采樣器。
• 去鼻強(qiáng)度?？刂埔砑佣嗌偌?xì)節(jié)。此方法的可行范圍在 0.1 和 0.4 之間。
• 種子：改變細(xì)節(jié)。

細(xì)節(jié)級(jí)別由去噪強(qiáng)度參數(shù)控制。正如我之前所說(shuō)，如果將其設(shè)置為高于 0.4，則此方法會(huì)失效，因?yàn)榉€(wěn)定擴(kuò)散會(huì)使圖像改變太多。您將開(kāi)始看到人工制品。

有什么方法可以在不犧牲原始構(gòu)圖的情況下增加去噪強(qiáng)度？嗯……這聽(tīng)起來(lái)非常類似于從參考圖像復(fù)制構(gòu)圖的擴(kuò)展功能……

這是正確的。解決方案是使用ControlNet！

方法 3：ControlNet 平鋪高檔

ControlNet tile是一種用于重新生成圖像細(xì)節(jié)的 ControlNet 模型。如果本地圖片詳情與提示不符，則忽略提示，填寫(xiě)本地詳情。這種行為使其非常適合在圖塊中放大，因此它適用于低 VRAM 設(shè)置。

您需要安裝Ultimate SD Upscale和ControlNet擴(kuò)展才能使用此方法。如果您還沒(méi)有這樣做，請(qǐng)按照軟件部分中的說(shuō)明進(jìn)行操作。

我不知道為什么這種方法不適用于內(nèi)置的 SD Upscale 腳本。它應(yīng)該，但它沒(méi)有。

分步指南

要執(zhí)行 ControlNet tile upscale：

1. 導(dǎo)航到AUTOMATIC1111 中的img2img頁(yè)面。

2. 將您的圖像上傳到img2img 畫(huà)布。

3.輸入原提示和否定提示。如果您沒(méi)有原始提示，您可以使用“非常詳細(xì)”。

備選方案 1：如果您剛剛在 txt2img 頁(yè)面上生成圖像，則可以單擊發(fā)送到 img2img按鈕。圖像和提示將自動(dòng)填充在img2img頁(yè)面上。

備選方案 2：如果您在本地圖像中保存了生成的圖像，請(qǐng)將其上傳到PNG 信息頁(yè)面。您應(yīng)該會(huì)看到生成此圖像的所有信息，包括提示和模型。單擊發(fā)送到 img2img。圖像和提示將自動(dòng)填充。在img2img頁(yè)面上。

4. 將采樣步數(shù)設(shè)置為 50。

5. 將去噪強(qiáng)度設(shè)置為 0.5。

以下步驟適用于ControlNet部分。

6. 將相同的原始圖像上傳到 ControlNet 的圖像畫(huà)布。

7. 選擇啟用以啟用 ControlNet 擴(kuò)展。

8.在預(yù)處理器下拉菜單中選擇tile_resample。

9.在模型下拉菜單中選擇control_v…_sd15_tile。

以下步驟適用于Ultimate SD Upscale擴(kuò)展。

10. 在頁(yè)面底部附近的腳本下拉菜單中，選擇****Ultimate SD Upscale。

11. 在Target size type下拉菜單中，選擇Scale from image size。

12. 將比例設(shè)置為 4。

13. 選擇一個(gè)升頻器。我使用了 Universal Upscaler v2。但是您可以為通用升頻器選擇 ESRGAN 或 R-ESRGAN。

14. 確認(rèn) Tile 寬度為 512，高度為 0。這將在放大期間使用 512×512 tile。

15. 單擊生成。

結(jié)果

這是放大后的圖像。

讓我們放大比較。

這是面孔。

驚人的！ControlNet 磁貼升級(jí)的質(zhì)量無(wú)異于改變生活。面部和頭發(fā)的渲染非常清晰，有很多細(xì)節(jié)。

現(xiàn)在讓我們檢查一下這件衣服。

看到添加了多少細(xì)節(jié)讓我大吃一驚！

這種方法的缺點(diǎn)可能是添加了太多細(xì)節(jié)。它可能會(huì)以某種方式改變圖像，使其不再是原始圖像的忠實(shí)放大。但這取決于你的目標(biāo)。

參數(shù)調(diào)整

您可以嘗試使用以下參數(shù)。

• 降噪強(qiáng)度：降低它以減少添加的細(xì)節(jié)量。根據(jù)我的經(jīng)驗(yàn)，最高合理值是 0.5。
• 下采樣率(ControlNet)：控制對(duì)控制塊進(jìn)行多少下采樣。增加此值會(huì)使控制圖像更加模糊?？刂茍D像越隱蔽，模型在制作細(xì)節(jié)時(shí)就越自由。

使用下采樣控制圖像。

• 采樣步數(shù)：增加步數(shù)往往會(huì)改善細(xì)節(jié)和清晰度。
• Sampling method : 和SD Upscale一樣，sampler可以起到最后細(xì)節(jié)的作用。
• 種子：更改種子以更改詳細(xì)信息。
• Seam fix (Ultimate SD Upscale)：如果您覺(jué)得可以看到 512×512 的拼貼，請(qǐng)啟用。此選項(xiàng)會(huì)沿著圖塊的邊界運(yùn)行額外的一輪放大。

你應(yīng)該使用哪一個(gè)？

在三個(gè)升級(jí)選項(xiàng)中 — AI 升級(jí)、SD 升級(jí)和 ControlNet tile 升級(jí)，您應(yīng)該使用哪一個(gè)？

在開(kāi)始推薦之前，我認(rèn)為 SD upscale 和 ControlNet tile upscale 的用例是相似的。ControlNet tile 高檔是優(yōu)越的。在任何情況下，您都不會(huì)想要使用 SD upscale 而不是 ControlNet tile upscale。

所以它歸結(jié)為 2 個(gè)選擇：(1) AI upscaler，和 (2) ControlNet tile upscale。

由于您通常會(huì)在 ControlNet tile 操作之前使用 AI upscale 對(duì)圖像進(jìn)行 upscale，因此本質(zhì)上歸結(jié)為是否使用 ControlNet tile conditioning 執(zhí)行額外的圖像到圖像。

如果您使用的是真實(shí)照片或保真度對(duì)您很重要，您可能希望放棄 ControlNet tile 并僅使用 AI upscaler。有許多AI 升頻器可用于不同類型的圖像。

事實(shí)上，即使是這些 AI upscalers 也會(huì)彌補(bǔ)細(xì)節(jié)，因此請(qǐng)明智地使用它們。

如果您還可以甚至更喜歡添加細(xì)節(jié)，ControlNet tile upscale 是您的不二之選。這適用于使用 Stable Diffusion 或其他 AI 圖像生成器生成的圖像。

這是一位SD資深大神整理的，100款Stable Diffusion超實(shí)用插件，涵蓋目前幾乎所有的，主流插件需求。

全文超過(guò)4000字。

我把它們整理成更適合大家下載安裝的【壓縮包】，無(wú)需梯子，并根據(jù)具體的內(nèi)容，拆解成一二級(jí)目錄，以方便大家查閱使用。

單單排版就差不多花費(fèi)1個(gè)小時(shí)。

希望能讓大家在使用Stable Diffusion工具時(shí)，可以更好、更快的獲得自己想要的答案，以上。

如果感覺(jué)有用，幫忙點(diǎn)個(gè)支持，謝謝了。

想要原版100款插件整合包的小伙伴，可以來(lái)點(diǎn)擊下方插件直接免費(fèi)獲取

100款Stable Diffusion插件：

面部&手部修復(fù)插件：After Detailer

在我們出圖的時(shí)候，最頭疼的就是出的圖哪有滿意，就是手部經(jīng)常崩壞。只要放到 ControlNet 里面再修復(fù)。

現(xiàn)在我們只需要在出圖的時(shí)候啟動(dòng) Adetailer 就可以很大程度上修復(fù)臉部和手部的崩壞問(wèn)題

AI換臉插件：sd-webui-roop

換臉插件，只需要提供一張照片，就可以將一張臉替換到另一個(gè)人物上，這在娛樂(lè)和創(chuàng)作中非常受歡迎。

模型預(yù)設(shè)管理器：Model Preset Manager

這個(gè)插件可以輕松的創(chuàng)建、組織和共享模型預(yù)設(shè)。有了這個(gè)功能，就不再需要記住每個(gè)模型的最佳 cfg_scale、實(shí)現(xiàn)卡通或現(xiàn)實(shí)風(fēng)格的特定觸發(fā)詞，或者為特定圖像類型產(chǎn)生令人印象深刻的結(jié)果的設(shè)置!

現(xiàn)代主題：Lobe Theme

已經(jīng)被贊爆的現(xiàn)代化 Web UI 主題。相比傳統(tǒng)的 Web UI 體驗(yàn)性大大加強(qiáng)。

提示詞自動(dòng)補(bǔ)齊插件：Tag Complete

使用這個(gè)插件可以直接輸入中文，調(diào)取對(duì)應(yīng)的英文提示詞。并且能夠根據(jù)未寫(xiě)完的英文提示詞提供補(bǔ)全選項(xiàng)，在鍵盤(pán)上按↓箭頭選擇，按 enter 鍵選中

提示詞翻譯插件：sd-webui-bilingual-localization

這個(gè)插件提供雙語(yǔ)翻譯功能，使得界面可以支持兩種語(yǔ)言，對(duì)于雙語(yǔ)用戶來(lái)說(shuō)是一個(gè)很有用的功能。

提示詞庫(kù)：sd-webui-oldsix-prompt

提供提示詞功能，可能幫助用戶更好地指導(dǎo)圖像生成的方向。

上千個(gè)提示詞，無(wú)需英文基礎(chǔ)快速輸入提示詞，該詞庫(kù)還在不斷更新。

以后再也不擔(dān)心英文寫(xiě)出不卡住思路了！

由于篇幅原因，有需要完整版Stable Diffusion插件庫(kù)的小伙伴，點(diǎn)擊下方插件即可免費(fèi)領(lǐng)取