如果您看不到或想象自己穿著一件衣服，就很難知道它是否適合您。有多少次你在網(wǎng)上買了一件東西，當(dāng)它送到你家門口時興奮地打開盒子，沖上去試穿，然后……困惑地盯著鏡子？它可能以您意想不到的方式垂墜?；蛘咴谀砩峡雌饋砼c在在線模型上看起來完全不同。

本周，google將在 Google.com 上發(fā)布一項(xiàng)新的購物功能，旨在為人們提供更有用的在線購物體驗(yàn)。虛擬試穿 (VTO) 在具有不同體型和尺寸的真實(shí)模特身上生成栩栩如生的服裝寫照。這些圖像包括那些微妙但至關(guān)重要的細(xì)節(jié)，例如某些東西如何懸垂、折疊、緊貼、拉伸和皺紋——所有這些都具有為 VTO 開發(fā)的新生成 AI 模型的強(qiáng)大功能。

購物者只需選擇一件他們感興趣的服裝，然后選擇一個款式，瞧，他們已經(jīng)看到試穿了。

“VTO 是在線購物向前邁出的激動人心的一步，尤其是在顯然需要更多代表性的服裝領(lǐng)域，”購物產(chǎn)品經(jīng)理 Shyam Sunder 說。“服裝是谷歌搜索最多的購物類別之一，因此對人們和品牌的幫助潛力巨大。統(tǒng)計數(shù)據(jù)顯示了一個明確的需求：42% 的在線購物者覺得模特圖片無法代表他們，59% 的人對他們在網(wǎng)上購買的商品感到不滿意，因?yàn)樗雌饋砼c他們預(yù)期的不一樣?！?/p>

從一開始，該團(tuán)隊(duì)就想為購物者提供一系列可以解決這個問題的模型?！爱?dāng)我們在網(wǎng)絡(luò)上搜索服裝時，當(dāng)涉及到穿著這些衣服的模特時，我們會發(fā)現(xiàn)結(jié)果差異很小，”Shyam 說?！拔矣浀靡粋€例子，50 張圖片中只有四張是有色人種。所以問題是，即使我們想在購物中顯示不同的圖像，我們也做不到，因?yàn)榫W(wǎng)絡(luò)上沒有足夠的圖像。這是我熱切想要解決的問題?！?/p>

因此，該團(tuán)隊(duì)創(chuàng)建了他們自己的資料庫，其中包含 80 個代表多種尺寸、膚色、身高、年齡和性別的模特，以便在 Google 上購物的人可以選擇他們最感興趣的模特，并查看衣服穿在身上的效果。

“一個關(guān)鍵問題是如何在每個模型上自動生成任何服裝，”購物研究科學(xué)家 Ira Kemelmacher-Shlizerman 說?！叭藗冄芯款愃萍夹g(shù)已經(jīng)有一段時間了，但最終的圖像從來沒有完全達(dá)到目標(biāo)——它們存在視覺缺陷，比如錯位的褶皺，使衣服看起來畸形和不自然。所以我們給自己設(shè)定了一個挑戰(zhàn)：創(chuàng)造一種方法，可以為任何體型和體形的人合成逼真的高質(zhì)量圖像。這就是生成人工智能的用武之地?！?/p>

該團(tuán)隊(duì)轉(zhuǎn)向了 VTO 的文本到圖像模型，該模型能夠從文本輸入創(chuàng)建高度逼真的圖像。尤其重要的是一種稱為擴(kuò)散的技術(shù)，該技術(shù)會逐漸將噪聲添加到照片中，并訓(xùn)練神經(jīng)網(wǎng)絡(luò)去除這些噪聲像素。

對于 VTO，該團(tuán)隊(duì)沒有使用單一的擴(kuò)散網(wǎng)絡(luò)和大型語言模型（如在文本到圖像中使用的那樣），而是創(chuàng)建了一種稱為并行 U-net 的新架構(gòu)，它接受兩幅圖像：人物圖像和服裝圖像。每張圖片都通過自己的神經(jīng)網(wǎng)絡(luò)——U-net——同時通過稱為“交叉注意力”的過程進(jìn)一步相互交流?！敖Y(jié)果是驚人的，”艾拉說?！拔覀兊挠脩粞芯勘砻鳎覀兊姆椒ū茸钕冗M(jìn)的方法有很大的優(yōu)勢——超過 95% 的時間。”

該團(tuán)隊(duì)使用 Google 的 Shopping Graph 對新的 AI 模型進(jìn)行嚴(yán)格訓(xùn)練，這是世界上最全面的產(chǎn)品、賣家、品牌、評論和庫存數(shù)據(jù)集。他們使用數(shù)百萬對圖像來訓(xùn)練模型，每對圖像都包括一個穿著衣服的人以兩種不同的姿勢。人工智能模型學(xué)習(xí)將一個姿勢的襯衫形狀與另一個姿勢的人相匹配，反之亦然，直到它可以從各個角度生成該人穿著襯衫的逼真圖像。

在一個例子中，試穿結(jié)果似乎比原來的衣服顏色更亮。該團(tuán)隊(duì)對這些類型的示例進(jìn)行了數(shù)天的審議，但最終決定在發(fā)布時謹(jǐn)慎行事，當(dāng)出現(xiàn)任何此類錯誤時，刪除在模型上虛擬試穿服裝的選項(xiàng)。隨著他們從用戶和品牌那里得到反饋，他們將繼續(xù)做出調(diào)整。“為生成圖像發(fā)明全自動評估仍然是一個懸而未決的問題，我們正在積極努力，”艾拉說。

如今，Google Shopping Graph 上數(shù)百個品牌和零售商的女裝上衣均可試穿，包括 Anthropologie、LOFT、H&M 和 Everlane。隨著時間的推移，該工具將變得更加精確并擴(kuò)展到更多品牌。到目前為止，品牌反響非常積極。

“當(dāng)我們讓他們了解這項(xiàng)技術(shù)時，我們收到了一些很好的反饋，并且也非常渴望參與，”Shyam 說。“他們中的一些人非常喜歡它，他們要求使用這項(xiàng)技術(shù)來支持他們自己的網(wǎng)站?！?/p>