早在六十年代,歷史上最熱的玩具之一席卷了美國。它被稱為蝕刻蝕刻,它的流行是基于一個現(xiàn)在可笑的簡單功能。這是一款手持式小型筆記本電腦設(shè)備,允許用戶通過旋轉(zhuǎn)兩個控制旋鈕繪制水平,垂直和對角線(由鋁顆粒密封在塑料盒中)來創(chuàng)建原始圖像。它使經(jīng)驗豐富的藝術(shù)家能夠創(chuàng)作出簡單且有時可以識別的肖像。坦率地說,通過生成看起來仍然很像糊狀的東西,那些經(jīng)驗不足的,想要畫些簡筆畫人物的想像藝術(shù)家就可以感覺像是該流派的大師。但是Etch-A-Sketch很有趣,它至今已售出1億個單位。
六十年后,中國科學院和香港城市大學的研究人員提出了一項發(fā)明,該發(fā)明實際上實現(xiàn)了許多一廂情愿的人所想像的Etch-A-Sketch多年來所做的事情。
DeepFaceDrawing允許用戶通過輸入松散的,非專業(yè)的,粗略繪制的草圖來創(chuàng)建逼真的肖像畫。它不需要藝術(shù)技能,也不需要編程經(jīng)驗。
該程序依靠機器學習來填充眼睛,鼻子和嘴巴等基本組件之間的空間。龐大的面部特征數(shù)據(jù)庫提供詳細的填充信息,概率公式有助于確定要插入各種細節(jié)的可能性。
最近有一些技術(shù)為用戶提供了從基本圖形創(chuàng)建圖像的功能,例如pix2pixHD,Lines2FacePhoto和iSketchNFill。將DeepFaceDrawing與這些程序進行比較,有時會發(fā)現(xiàn)其他程序的結(jié)果令人恐懼。比較結(jié)果顯示DeepFaceDrawing在其他素描程序上方站立著。
由陳樹瑜(Shu-Yu Chen)領(lǐng)導的研究人員在最近在線發(fā)布的報告中解釋了這些程序之間的區(qū)別:
“最近的深層圖像到圖像的轉(zhuǎn)換技術(shù)可以從徒手素描中快速生成人臉圖像。但是,現(xiàn)有的解決方案往往會過度適合素描,因此需要專業(yè)素描甚至邊緣貼圖作為輸入。要解決這個問題,我們的主要思想是隱式地對合理的面部圖像的形狀空間進行建模,并在該空間中合成面部圖像以近似輸入草圖。”
報告指出:“我們的方法主要使用輸入草圖作為軟約束,因此即使從粗糙和/或不完整的草圖中也可以生成高質(zhì)量的人臉圖像。”
該團隊計劃在今年的SIGGRAPH 7月會議上演示DeepFaceDrawing。該小組成立于1969年,每年舉行一次有關(guān)計算機圖形學最新發(fā)展的會議。由于COVID-19,今年的活動將是虛擬的。
DeepFaceDrawing具有明顯的娛樂吸引力。但是它在執(zhí)法中具有巨大的潛力,在這種情況下,快速,準確地勾勒犯罪嫌疑人非常寶貴。它還具有在面部識別應(yīng)用程序,醫(yī)療程序和教育培訓中使用的潛力。
該小組表示,他們將很快發(fā)布其代碼。
這項研究是在上周的一份報告之前進行的。該報告說,伊斯坦布爾技術(shù)大學計算機工程系的土耳其研究人員僅使用耳朵的圖像就可以使用深度神經(jīng)網(wǎng)絡(luò)準確地創(chuàng)建人的面部。
讓我們?yōu)闄C器學習和深度神經(jīng)網(wǎng)絡(luò)聆聽它。