今天小編分享的科技經驗:網店模特危機,谷歌研究院推出TryOnDiffusion,歡迎閱讀。
品玩 6 月 19 日訊,據 Arixv 頁面顯示,Google Research 近日聯合華盛頓大學推出一款大模型產品 TryOnDiffusion。
TryOnDiffusion 可以将兩幅圖片進行合成,幫照片中的人物更換不同的服飾。此前這類模型通常會存在缺乏服飾細節的缺點。而 TryOnDiffusion 利用一種被稱為 UNet 的擴散式架構,讓合成的照片可以在保留服飾細節的情況下适應人體的姿勢以及形狀變化。UNet 的核心是使用交叉注意機制來讓服飾變形。此外,研發團隊還将衣物扭曲和人物融合成為一個任務,而不是兩個獨立的任務。
實驗結果表明,TryOnDiffusion 在定量和定性上均達到了具有競争力的最先進水平。