本文的標(biāo)題是《看膩了各路APP換頭修臉?修圖老炮兒Photoshop給你“換頭”新體驗》來源于:由作者:陳開拓采編而成,主要講述了智東西(公眾號:zhidxcom)
編 | 子佩
智東西10月23日消
智東西(公眾號:zhidxcom)
編 | 子佩
智東西10月23日消息,近期Adobe發(fā)布帶有AI神經(jīng)網(wǎng)絡(luò)過濾器的新版Photoshop22.0,包含如替換天空、以及修改圖片邊緣等許多功能。
其中最受關(guān)注的是對人臉肖像的深層編輯,借助神經(jīng)網(wǎng)絡(luò)過濾器,新版Photoshop可以調(diào)整畫面中人物的年齡和面部表情,并通過滑塊滑動增加或減少其“快樂”、“驚訝”或“憤怒”的感情。除此之外,用戶也可以通過簡單的功能鍵摘下人物的**或使用濾鏡為他“換臉”。
一、GAN、云計算助力PS三秒換臉
Adobe數(shù)字圖像副總裁Maria Yap對外媒The Verge表示:“現(xiàn)在,我們可以說Photoshop是世界上最先進(jìn)的AI應(yīng)用程序。因為我們正在創(chuàng)造圖像AI領(lǐng)域的新應(yīng)用。”
為了能夠更好地滿足用戶的需求,快速便捷地使用Photoshop更換畫面中人物年齡、面部表情等,Adobe采用生成對抗網(wǎng)絡(luò)(GAN),一種常用于生成視覺圖像的機器學(xué)習(xí)算法。每個功能從**作開始到完成只需要幾秒鐘,如果計算量過大,功能進(jìn)程將會在云中完成。
或許對于熟悉AI圖像編輯領(lǐng)域的人來說,這些常在論文和演講中出現(xiàn)的技術(shù)并不新奇。但從社交媒體中流行一時的demo以及論文成果,到Photoshop這樣消費巨頭的大規(guī)模應(yīng)用落地,新版Photoshop發(fā)布對于AI圖像編輯領(lǐng)域依舊有重大意義。
在Adobe發(fā)布會的展示中,新版Photoshop展現(xiàn)了處理圖像細(xì)節(jié)、發(fā)揮設(shè)計創(chuàng)意的驚人、順暢的完美效果。但這些功能是否能在實際應(yīng)用中發(fā)揮其宣稱的效果,又是否存在其他問題,依舊將取決于用戶的反饋。
二、跨種族數(shù)據(jù)集、算法測試,致力消除算法“偏見”
通過對過去數(shù)據(jù)集的學(xué)習(xí),AI工具可開始自主修改圖像。例如,為了創(chuàng)建用于消除皮膚斑點的神經(jīng)過濾器,Adobe收集了專業(yè)攝影師修圖后的數(shù)千次圖片,并將這些數(shù)據(jù)輸入算法中。GAN就像一對學(xué)生和老師一樣工作,一部分試圖**這些示例,而另一部分則試圖區(qū)分原修圖結(jié)果和自己的訓(xùn)練結(jié)果。最終,當(dāng)GAN明白兩者之間的區(qū)別時,訓(xùn)練過程就完成了。
“我們正在訓(xùn)練GAN像專業(yè)修圖師一樣修圖。”Adob??e Creative Cloud工程副總裁Alexandru Costin說。
這種方法聽起來很簡單,但也會產(chǎn)生很多問題,其中一個最大的問題就是面部識別偏見。如上述提到的,算法根據(jù)以前的數(shù)據(jù)集進(jìn)行學(xué)習(xí),所以如果訓(xùn)練集中只包含白種人的面部數(shù)據(jù),那么訓(xùn)練出來的算法無法識別有色人種,更無法對深色人種面部圖像進(jìn)行編輯。這就是為什么很多人臉識別系統(tǒng)無法識別有色人種和女性的原因,因為缺乏這部分?jǐn)?shù)據(jù)集。
但這也是Adobe的優(yōu)勢所在,長期在圖像編輯行業(yè)主導(dǎo)地位讓Adobe擁有大量跨種族、性別、年齡的數(shù)據(jù)集,可以減少面部識別算法產(chǎn)生“偏見”的可能。
Adobe還成立了審核小組和AI倫理委員會,每次進(jìn)行重大更新都會對算法進(jìn)行測試。“我們對每項功能進(jìn)行了非常徹底的審查,以查看是否有“偏見”存在的肯能并盡可能減少‘偏見’。”Costin提到。
當(dāng)然,即使這樣也不能保證算法就一定能“公平公正”。尤其是當(dāng)神經(jīng)網(wǎng)絡(luò)過濾器結(jié)束beta測試進(jìn)入普通大眾的手中時。因此,在每次應(yīng)用過濾器時,Photoshop都會詢問用戶對結(jié)果是否滿意,如果不滿意,則可以選擇報告“不適當(dāng)?shù)摹眱?nèi)容。用戶可以選擇將修改前后的圖像匿名發(fā)送給Adobe進(jìn)行進(jìn)一步研究。這樣,該公司不僅能消除偏見,還能進(jìn)一步擴大訓(xùn)練數(shù)據(jù)集,從而使神經(jīng)網(wǎng)絡(luò)過濾器有更高的準(zhǔn)確率。
結(jié)語:AI圖像時代日新月異,Photoshop只能迎頭趕上
AI領(lǐng)域的技術(shù)更新迭代非常快,新的機器學(xué)習(xí)方法通常會發(fā)布在arXiv上,一個未在期刊上發(fā)表過的開源科學(xué)論文集,供其他研究人員閱讀、復(fù)現(xiàn)和修改。在幾天之內(nèi),研究人員就可以在社交媒體上互相評論和分享結(jié)果。
一些專注于AI的Photoshop競爭對手通過在開源論文網(wǎng)站分享自己的成果來脫穎而出。例如,專注圖像領(lǐng)域機器學(xué)習(xí)的應(yīng)用商店Runway ML不僅允許用戶使用自己的數(shù)據(jù)來訓(xùn)練機器學(xué)習(xí)過濾器(Photoshop不能這樣做),而且它還運行著用戶生成的“市場”,使人們可以輕松共享和使用最新的工具。如果設(shè)計師或插圖畫家在Twitter上看到有趣的東西,他們會希望借助其他軟件或工具立即使用,而不是等待Photoshop升級新功能。
為了避免應(yīng)用BUG以及提升用戶體驗,Adobe不可能以這些新興公司的速度更新應(yīng)用。但憑借這次發(fā)布的神經(jīng)網(wǎng)絡(luò)過濾器,Adobe正在逐步布局AI圖像編輯領(lǐng)域,并計劃發(fā)布十六種不同功能的神經(jīng)網(wǎng)絡(luò)過濾器。其中兩個已完成,六個進(jìn)入“ beta”測試階段,另外八個還在研發(fā)階段。
調(diào)整年齡和表情也僅僅只是開始,Adobe將會通過更多的用戶反饋獲得更多數(shù)據(jù),從而創(chuàng)建更好的工具踏上AI時代的飛輪。
來源:The Verge
本文原作者為陳開拓,轉(zhuǎn)載請注明:出處!如該文有不妥之處,請聯(lián)系站長刪除,謝謝合作~
原創(chuàng)文章,作者:陳開拓,如若轉(zhuǎn)載,請注明出處:http://www.uuuxu.com/20220520347222.html