量化 Stable Diffusion 模型:基於證據的行動指南,將目前的 PhoneDiffusion 功能與 Android、桌面、雲端和不受支援的模型工作流程分開。
簡短的答案
當您將設定視為權衡並根據一個固定提示和種子對其進行測試時,量化 Stable Diffusion 模型會變得更加容易。這款手機不是微型桌面工作站,但當工作流程尊重其記憶體、電池和散熱限制時,它是一個強大的創意工具。
設定會影響模型追蹤文字的強度、執行的去噪更新次數、輸出的形狀以及結果是否可以重複。
PhoneDiffusion 可用性和文章範圍
PhoneDiffusion 目前適用於 iOS 17 或更高版本上的 iPhone 和 iPad。它使用透過應用程式提供的模型包在設備上執行支援的生成和編輯;確切的可用性取決於設備、安裝的包、訂閱存取權限和當前版本。
此應用程式目前提供精選的 SD 1.5 和 SDXL 產生套件以及相容的編輯資源。本文中更廣泛的 Stable Diffusion 技術具有教育意義,除非所需的模型或控制項在目前應用程式中可見。
設備上產生不會將提示或產生的影像傳送至渲染伺服器或分析。模型下載和網路支援的服務(例如購買、診斷和可選通知)仍然需要連接。只有當您選擇共享、匯出或提交回饋或支援時,圖像、提示或螢幕截圖才會離開裝置。
對於量化 stable diffusion 模型來說重要的是什麼
從預期結果開始。一個快速的想法、一個可重複使用的資產和一個完成的高解析度圖像需要不同的時間和控制。在手機上,通常可以更快地探索中等尺寸和短期運行,保存有前途的種子,並僅將昂貴的通行證花在值得保留的作品上。
桌面建議通常需要更多的記憶體和冷卻。將 50 個步驟的高解析度配方複製到手機上可能會浪費時間,而且不會產生明顯更好的影像。
行動優先的工作方式
讓第一次嘗試夠簡單,讓您能理解其成功或失敗的原因。如果主題錯誤,請重寫主題。如果構圖錯誤,請變更構圖。如果影像已經接近,請在觸摸品質設定之前保留提示和種子。
透過相容的安裝包,PhoneDiffusion 可以在裝置上創建,讓您檢查結果,並公開所選工作流程的控制項。在完成所需的下載後,產生可以在沒有渲染伺服器的情況下工作,但下載、購買、診斷和可選網路服務仍然使用網路連線。
乾淨的量化 stable diffusion 模型測試
產生基線,複製其提示和種子,然後僅更改量化 stable diffusion模型。以相同的顯示尺寸並排放置結果。判斷主體準確性、構圖、偽影、細節和經過的時間,而不僅僅是哪張影像看起來更繁忙。
使用三個故意分開的值,而不是十個微小的增量。第一遍應該揭示變化的方向;第二遍可以縮小有用範圍。
保留最小或最快的設置,以達到您在預期畫面上實際看到的品質。手機大小的裁剪後消失的額外計算並不是有用的品質。
常見錯誤
最常見的錯誤是同時更改提示、種子、模型、解析度和品質設定。你可能會得到不同的看法,但你不會知道哪個改變有幫助。第二個錯誤是將桌麵食譜視為法律;行動高效模型通常需要更少的步驟和不同的記憶體選擇。
也要保持誠實的期望。擴散模型可以創造引人注目的概念,但精確的文字、解剖結構、重複的字元、產品標識和微小的細節可能需要再次嘗試或有針對性的編輯步驟。保存最好的基礎鏡像,而不是試圖在一代中解決所有缺陷。
現場註釋
- 更多步驟並不能保證更多細節。
- 相同的種子只能使用相同的模型和管道選擇完全重現。
- 移動高效模型旨在以更少的次數獲得有用的結果。
在手機上試用
- 選擇與應用明確相容的模型和設備。
- 使用應用的平衡預設作為基準。
- 在比較一項設定之前鎖定提示和種子。
- 當明顯的改進消失時,停止增加值。