日本,東京都
- 夢晨 發自 凹非寺
量子位 | 公眾號 QbitAI
AI生圖新突破！一個模型同時接受文本和圖像輸入。
新模型FLUX.1 Kontext使用流匹配架構（Flow Matching），不再是文本編碼器和擴散模型各干各的，與此前技術都不同。
最來自之前很火的Black Forest Labs，官方表示這一次能做到真正的上下文生成和編輯。
在編輯能力上，有人在著名的奧特曼尷尬照上P了一個小綠龍。
在生成能力上，有網友測試的猩猩打羽毛球細節也很豐富。
具體來說FLUX.1 Kontext有4個特性：
- 角色一致性：可跨場景保留元素
- 局部編輯：只針對特定部分而不影響其余部分
- 風格參考：以現有風格生成新場景
- 交互速度：以最小延遲進行迭代
這次提供兩種模型，專業版FLUX.1 Kontext [pro]更適合快速迭代，可基于之前的編輯
最高配版FLUX.1 Kontext [max]，在遵循提示、文字排版和一致性有所提高。
同時推出官方試玩平臺Flux Playground，兩種型號都可以選用
此外開放權重版FLUX.1 Kontext [dev]提供內測。
提示詞技巧
第三方平臺Replicate對FLUX.1 Kontext做了詳細測試，結論是比OpenAI的4o效果更好，還更便宜，圖像也不會偏黃。
測試報告中還針對不同功能給了提示詞技巧。
圖像編輯
當編輯人物時，無論改動大小，人物的身份特征都會保留。
對于風格遷移任務，也能保留人物的基本特征。
對于更復雜的更改，例如添加人物或更改背景，需要分幾步描述每項修改，只要每次改動不太復雜就可以獲得好的效果。
風格遷移
風格遷移任務至少具體到“印象派繪畫”或“水彩素描”，帶上具體的流派藝術家效果更好，如“文藝復興”或“20 世紀 60 年代的波普藝術”。
如果風格標簽不夠精準，那就描述一下關鍵特征，例如“清晰的筆觸、厚重的顏料質感和豐富的色彩深度”。如果想保留某些元素，也需要明確說明，如“保持原始構圖”。
總之，描述的越具體效果越好。
文本編輯
支持往圖上新增文本、刪除文本，甚至定位到已有文本修改。
處理文本時的一些技巧：
- 使用易讀的字體，過于藝術化的字體表現不佳
- 明確說明要保留哪些內容。如果保留字體樣式很重要，請務必提及
- 盡可能匹配編輯前后的文本長度。長度的大幅變化可能會改變布局
此外根據網友測試，FLUX.1 Kontext還可以刪除文本，如把電影海報上的字全去掉。
角色一致性
在連續編輯時，首先要明確人物，然后說明哪些方面發生了變化，無論是場景、活動還是風格。
如果想讓同一個人物繼續存在，需要說明哪些方面需要保留：面部、表情、服飾或其他任何重要方面。
在編輯背景和場景的同時保持角色的一致性需要詳細描述，以保持人物處于相同的位置、比例或姿勢。
簡短的提示有時會留下太多模糊的地方，如“把他挪到沙灘上”，就不如：
- 將背景換成海灘，同時保持人物位置不變，保持相同的主體位置、拍攝角度、取景和視角。只需替換人物周圍的環境即可。
其他技巧
最后，Repilicate還對使用FLUX.1 Kontext的提示詞技巧做了一個總結：
- 使用清晰、詳細的語言。準確命名顏色，精準描述視覺元素，并選擇直接的動作動詞。避免使用“使其更好”之類的模糊詞語。
- 將復雜的編輯分解成更小的步驟。按順序進行操作，更容易管理較大的變更。
- 明確哪些部分應該保留。使用“同時保持相同的面部特征”或“維持原始構圖”等短語來保護關鍵元素。
- 使用描述性短語，例如“留著黑色短發的女人”或“紅色汽車”。避免使用代詞。
- 編輯文本時使用引號，例如，“將‘x’替換為‘y’”
- 明確控制構圖 ：編輯場景時，明確說明是否要保留攝像機角度或取景框等內容。
- 謹慎選擇動詞 ：“改造”之類的詞語暗示著徹底的改造。如果想要更精準的控制，可以使用更具體的操作，例如“換衣服”或“替換背景”。
One More Thing
最后再來看一下文生圖領域的格局，在AritificialAnalysis的排行榜上，GPT-4o、字節的Seedream 3.0和Recraft V3排名前三。
Black Forest Labs的上一代爆款產品FLUX.1已經相對靠后。
可以期待一下FLUX.1 Kontex的投票結果。
在線試玩
https://playground.bfl.ai/image/generate
[1]https://x.com/bfl_ml/status/1928143010811748863
[2]https://replicate.com/blog/flux-kontext
[3]https://huggingface.co/spaces/ArtificialAnalysis/Text-to-Image-Leaderboard
特別聲明：以上內容(如有圖片或視頻亦包括在內)為自媒體平臺“網易號”用戶上傳并發布，本平臺僅提供信息存儲服務。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.
