輸入一張女性的照片，就能得到果體照，一件脫衣的DeepNude火了。但也因?yàn)槊媾R巨大的道德?tīng)?zhēng)議，這款軟件的開(kāi)發(fā)者選擇了將它下架。
而且DeepNude本身也不開(kāi)源，我們只能從開(kāi)發(fā)者零星的介紹中知道，它用到了pix2pix。
在巨大的求知欲驅(qū)動(dòng)下，來(lái)自四川大學(xué)計(jì)算機(jī)學(xué)院在讀碩士袁宵在自己的GitHub探究了DeepNude背后原理，研究圖像生成和圖像修復(fù)相關(guān)的技術(shù)和論文。
據(jù)他的分析，其實(shí)DeepNude只是“站在巨人的肩上”，里面用到的技術(shù)都是近兩年CV領(lǐng)域的重大研究成果，而且都已經(jīng)開(kāi)源。
當(dāng)然，作者本身對(duì)這項(xiàng)技術(shù)是持批判態(tài)度的。
原理
DeepNude主要使用了2018年發(fā)表的文章《Image Inpainting for Irregular Holes Using Partial Convolutions》中提出的圖像到圖像技術(shù)。
它可以把簡(jiǎn)筆畫(huà)變成色彩豐富的圖像，感興趣的同學(xué)可以去Demo網(wǎng)站在瀏覽器中試玩。
具體來(lái)說(shuō)，DeepNude主要使用了計(jì)算機(jī)視覺(jué)領(lǐng)域的3項(xiàng)技術(shù)。
1、圖像修復(fù)
即上面提到的文章，這是來(lái)自英偉達(dá)Guilin Liu等人的團(tuán)隊(duì)在2018年發(fā)表的研究。
當(dāng)畫(huà)面被嚴(yán)重涂抹后，模型仍然能夠恢復(fù)出“原來(lái)”的圖像，可以說(shuō)是“毫無(wú)PS痕跡”。
Image Inpainting除了能修復(fù)受損的圖像，還能去掉圖像中的某些物品，比如把草地中的石頭涂抹一下，恢復(fù)的后圖片中不再有石頭。
DeepNude用它除掉了圖片里的衣服。
2、Pix2Pix
這是加州大學(xué)伯克利分校在2017年發(fā)表的文章，使用條件對(duì)抗網(wǎng)絡(luò)作為圖像到圖像轉(zhuǎn)換問(wèn)題的通用解決方案。
image.png
從語(yǔ)義分割到原圖、從黑白到彩色、補(bǔ)全簡(jiǎn)筆畫(huà)等等，Pix2Pix幾乎無(wú)所不能。
3、CycleGAN
這是來(lái)自朱俊彥本人的博士論文，曾獲得2018年ACM SIGGRAPH最佳博士論文獎(jiǎng)。
CycleGAN使用循環(huán)一致性損失函數(shù)來(lái)實(shí)現(xiàn)訓(xùn)練，而無(wú)需配對(duì)數(shù)據(jù)。換句話說(shuō)，它可以從一個(gè)域轉(zhuǎn)換到另一個(gè)域，而無(wú)需在源域和目標(biāo)域之間進(jìn)行一對(duì)一映射。這開(kāi)啟了執(zhí)行許多有趣任務(wù)的可能性，例如照片增強(qiáng)，圖像著色，風(fēng)格遷移等。您只需要源和目標(biāo)數(shù)據(jù)集。
它可以在普通的馬和斑馬之間進(jìn)行轉(zhuǎn)換，也能把夏天的景色變成冬天的景色。
以上3種工具的代碼都已經(jīng)開(kāi)源。
DeepNude文件
DeepNude軟件包中所有的文件如下：
袁宵認(rèn)為DeepNude軟件還是存在一些缺點(diǎn)可以改進(jìn)的：
1、軟件體積太大：一個(gè)pyqtlib.rar文件的體積就高達(dá)1.9GB。
2、轉(zhuǎn)換速度慢：處理一張圖片需要30秒；
3、內(nèi)容不尊重女性：這是對(duì)深度學(xué)習(xí)技術(shù)的錯(cuò)誤使用
他認(rèn)為，DeepNude可以使用TensorFlow來(lái)實(shí)現(xiàn)，壓縮模型的體積。軟件本身也應(yīng)該改變目前不尊重女性的做法，把這項(xiàng)技術(shù)用在正途上。研究人員應(yīng)努力為人類(lèi)謀福祉，而不是通過(guò)違法軟件獲取收入。
求種現(xiàn)場(chǎng)
雖然袁宵本人的愿望很美好，但是這個(gè)項(xiàng)目的討論頁(yè)面還是不可避免地成為了求種現(xiàn)場(chǎng)。
隨著DeepNude下架，有人希望作者能提供原版軟件下載地址，或者提供一些代碼之類(lèi)的。
作者本人當(dāng)然是嚴(yán)詞拒絕，不光關(guān)乎道德，因?yàn)樵谥袊?guó)傳播色情軟件是違法的。
最后插播一條最新消息，另一款”羞羞”的軟件也被視為非法了，那就是可以把愛(ài)情動(dòng)作片女主角換成任意女神的Deepfake。
在美國(guó)弗吉尼亞州，未經(jīng)本人同意，制造虛假的裸露圖片或視頻將視作犯罪，可處以罰款乃至監(jiān)禁。