早在六十年代,歷史上最熱的玩具之一席卷了美國(guó)。它被稱(chēng)為蝕刻蝕刻,它的流行是基于一個(gè)現(xiàn)在可笑的簡(jiǎn)單功能。這是一款手持式小型筆記本電腦設(shè)備,允許用戶(hù)通過(guò)旋轉(zhuǎn)兩個(gè)控制旋鈕繪制水平,垂直和對(duì)角線(xiàn)(由鋁顆粒密封在塑料盒中)來(lái)創(chuàng)建原始圖像。它使經(jīng)驗(yàn)豐富的藝術(shù)家能夠創(chuàng)作出簡(jiǎn)單且有時(shí)可以識(shí)別的肖像。坦率地說(shuō),通過(guò)生成看起來(lái)仍然很像糊狀的東西,那些經(jīng)驗(yàn)不足的,想要畫(huà)些簡(jiǎn)筆畫(huà)人物的想像藝術(shù)家就可以感覺(jué)像是該流派的大師。但是Etch-A-Sketch很有趣,它至今已售出1億個(gè)單位。
六十年后,中國(guó)科學(xué)院和香港城市大學(xué)的研究人員提出了一項(xiàng)發(fā)明,該發(fā)明實(shí)際上實(shí)現(xiàn)了許多一廂情愿的人所想像的Etch-A-Sketch多年來(lái)所做的事情。
DeepFaceDrawing允許用戶(hù)通過(guò)輸入松散的,非專(zhuān)業(yè)的,粗略繪制的草圖來(lái)創(chuàng)建逼真的肖像畫(huà)。它不需要藝術(shù)技能,也不需要編程經(jīng)驗(yàn)。
該程序依靠機(jī)器學(xué)習(xí)來(lái)填充眼睛,鼻子和嘴巴等基本組件之間的空間。龐大的面部特征數(shù)據(jù)庫(kù)提供詳細(xì)的填充信息,概率公式有助于確定要插入各種細(xì)節(jié)的可能性。
最近有一些技術(shù)為用戶(hù)提供了從基本圖形創(chuàng)建圖像的功能,例如pix2pixHD,Lines2FacePhoto和iSketchNFill。將DeepFaceDrawing與這些程序進(jìn)行比較,有時(shí)會(huì)發(fā)現(xiàn)其他程序的結(jié)果令人恐懼。比較結(jié)果顯示DeepFaceDrawing在其他素描程序上方站立著。
由陳樹(shù)瑜(Shu-Yu Chen)領(lǐng)導(dǎo)的研究人員在最近在線(xiàn)發(fā)布的報(bào)告中解釋了這些程序之間的區(qū)別:
“最近的深層圖像到圖像的轉(zhuǎn)換技術(shù)可以從徒手素描中快速生成人臉圖像。但是,現(xiàn)有的解決方案往往會(huì)過(guò)度適合素描,因此需要專(zhuān)業(yè)素描甚至邊緣貼圖作為輸入。要解決這個(gè)問(wèn)題,我們的主要思想是隱式地對(duì)合理的面部圖像的形狀空間進(jìn)行建模,并在該空間中合成面部圖像以近似輸入草圖。”
報(bào)告指出:“我們的方法主要使用輸入草圖作為軟約束,因此即使從粗糙和/或不完整的草圖中也可以生成高質(zhì)量的人臉圖像。”
該團(tuán)隊(duì)計(jì)劃在今年的SIGGRAPH 7月會(huì)議上演示DeepFaceDrawing。該小組成立于1969年,每年舉行一次有關(guān)計(jì)算機(jī)圖形學(xué)最新發(fā)展的會(huì)議。由于COVID-19,今年的活動(dòng)將是虛擬的。
DeepFaceDrawing具有明顯的娛樂(lè)吸引力。但是它在執(zhí)法中具有巨大的潛力,在這種情況下,快速,準(zhǔn)確地勾勒犯罪嫌疑人非常寶貴。它還具有在面部識(shí)別應(yīng)用程序,醫(yī)療程序和教育培訓(xùn)中使用的潛力。
該小組表示,他們將很快發(fā)布其代碼。
這項(xiàng)研究是在上周的一份報(bào)告之前進(jìn)行的。該報(bào)告說(shuō),伊斯坦布爾技術(shù)大學(xué)計(jì)算機(jī)工程系的土耳其研究人員僅使用耳朵的圖像就可以使用深度神經(jīng)網(wǎng)絡(luò)準(zhǔn)確地創(chuàng)建人的面部。
讓我們?yōu)闄C(jī)器學(xué)習(xí)和深度神經(jīng)網(wǎng)絡(luò)聆聽(tīng)它。