這篇教學將帶你一步步操作,利用 ComfyUI 的 FLUX ControlNet 工作流 搭配 Ollama 圖像辨識模型,把照片快速轉換成簡單的線條圖。過程中會示範如何安裝所需工具與設定流程,即使是初學者也能輕鬆上手。
文章大鋼
🛠️ 第一步:安裝 Ollama 節點與模型
Ollama 是一套能夠辨識圖像、轉換為提示詞的工具,可以幫助我們免去手動輸入圖片描述的步驟,讓整個工作流程更自動化。
1.1 安裝 Ollama 節點
- 開啟 ComfyUI。
- 進入 節點管理器(Manager)。
- 搜尋
Ollama
,直接點選安裝。 - 或者,當你載入包含 Ollama 的工作流時,ComfyUI 也會提示缺少的節點,讓你直接安裝。
1.2 安裝 Ollama 主程式
- 前往 Ollama 官網。
- 下載適合你作業系統的版本(支援 Windows / macOS / Linux)。
- 安裝完成後:
- 你可以在電腦右下角看到一個「羊駝頭」圖示,代表已啟動。
- 或者開啟命令提示字元,輸入
ollama
,若出現相關文字說明,代表安裝成功。
🔍 第二步:下載 llava-phi3 模型(圖像辨識)
接著,我們需要安裝 Ollama 支援的圖像辨識模型 llava-phi3
:
打開命令提示元 輸入 ollama run llava-phi3
這條指令會自動下載並啟用模型。下載完成後,代表 Ollama 已經可以開始辨識圖像並產生提示詞。
🖼️ 第三步:開啟 ComfyUI 並載入 FLUX ControlNet 工作流
3.1 載入工作流
- 開啟 ComfyUI。
- 將預先下載好的「線條圖轉換工作流(Flux ControlNet workflow)」拉進 ComfyUI 畫布中。
- 確認所有節點都已成功安裝。
3.2 上傳你的圖片
- 在對應的
Image Input
節點上傳你想要轉換的圖片。 - 系統會透過 Ollama 自動解析圖像內容,並傳遞給 ControlNet 做處理。
⚙️ 第四步:調整參數(可選)
如果你想進一步微調輸出的線條效果,可以:
- 調整
Prompt
或Keywords
節點中的文字提示。 - 修改 ControlNet 相關設定來改變線條密度或風格。
不過對於大多數情況,預設參數已經能得到不錯的效果。
✅ 第五步:點擊生成,完成線條圖!
最後,只要點擊畫面的「Queue Prompt」按鈕,就能開始處理並輸出你的線條圖。幾秒鐘後就可以在輸出節點中看到成果了!
📝 總結
這個流程透過 Ollama 的圖像辨識能力與 FLUX ControlNet 的圖像轉換技術,讓你幾乎不用輸入任何文字,就能輕鬆將一張普通圖片轉換成線條圖。非常適合用於:
- 插畫底稿繪製
- AI繪圖前置處理
- 風格化影像處理
有了這套流程,你就能輕鬆把創意變成作品啦!