簡單草圖也能瞬間生成真實人臉照?

人工智能的功能真的是越來越強大了。小黑前幾天剛剛介紹過可以寫文章的人工智能GPT-3,現在,又來了幾個可以畫畫的人工智能。
這些人工智能有的可以自動生成人臉照片,有的可以讓人變成“迪士尼小公主”。具體情況,還是跟著小黑一起來看看吧。

讓簡筆畫變成真人照片,人工智能是怎么做到的?
將3D物體繪制成平面圖片的人工智能算法已經不算什么新鮮事了,而且實現原理也并不復雜:獲取3D模型輸入,并逐步細分,最后繪制出這一3D對象的平面圖像進行輸出。
但是要將這些步驟反過來,在平面圖片中生成逼真的圖像,是不是聽起來有點像是科幻小說中的情節?其實,在一年半以前,英偉達的科學家就開始使用這一算法了。
不過,這個算法的局限性在于無法生成真實的人臉。
為了達到這一目標,科學家們做出了許多努力,但一般的AI算法都需要細節完善的圖片進行處理,因此實用性和普及度都不夠高。
但是,這個問題現在得到了最終解決:新的AI算法DeepFaceDrawing,可以幫助用戶從手繪簡圖中深度生成面部圖像。
DeepFaceDrawing是一種基于深度學習的圖像-圖像轉換技術。這一技術可以幫助像小黑這樣的手殘黨畫出逼真的人像。
根據該團隊的說法,“我們的主要想法是從真實的面部素描圖像中隱式地學習一個合理的面部描寫空間,并在該空間中找到最接近的點來模擬該輸入草圖。”
DeepFaceDrawing的深度學習框架由三個模塊組成,分別是CE(組件嵌入)、FM(特征映射)和IS(圖像合成)。CE模塊用來識別一些突出的面部特征,如眼睛、鼻子、嘴巴等,也包括面部剩余的部分。之后,由FM將這些特征映射到即將生成的人臉中,最后由IS生成完整的人臉。
不僅如此,它還可以識別用戶畫出的不同表情,并以此生成不同表情的人臉圖片。
除此之外,用戶還可以不畫任何物體,只通過選擇面部特征,就可以得到人臉圖片。這項技術被稱作“Face Copy-Paste”。
當然,這項技術還有一些局限性,例如只能生成看上去“漂亮”的臉,但不可否認的是,至少從小黑的角度來說,這項技術的實際運用會相當廣泛:
至少警察叔叔們在需要繪制人像的時候,可以先讓受害者繪制簡單草圖,并稍作調整,就可以第一時間知道犯罪嫌疑人的大概長相,而不必再等專門的模擬畫像專家上門了。要知道,模擬畫像專家可是非常稀有的呢。

通過照片,一鍵進入迪士尼的世界
如果上面那個AI算法在現實中非常有用,那么接下來小黑要介紹的這個算法,則可以滿足每個孩子的“卡通夢”。
這個算法的名字叫作Toonify Yourself。在介紹之前,小黑先放出幾張通過它制作的名人卡通頭像讓大家欣賞一下吧。
雖然小黑個人覺得,這個AI的實現方式并不困難,但它的火爆還是讓小黑吃驚:
根據Toonify Yourself開發者的闡述,這個工具剛剛發布就完成了25萬次服務,甚至一度還因為擠爆了服務器被迫下線。好在目前,這個工具已經重新上線,感興趣的小伙伴們可以通過國外的搜索引擎搜索“Toonify Yourself”,來進行體驗。
根據開發者之一的Doron Adler介紹,Toonify Yourself采用的是混合網絡(Blended Network)機制,這個機制雖然復雜,但整體工作流程與其他的人工智能是一樣的:首先,通過預訓練模塊對數量龐大的數據學習,之后再使用處理模塊進行圖像的混合生成。
為了保證生成照片的漫畫效果,他們收集了迪士尼、皮克斯、夢工廠等動畫制作廠商的約300多張漫畫圖像作為學習數據集。
而在圖像處理模塊中,模型中的不同層會以不同方式影響人物的生成效果。低分辨率層決定頭部姿勢和人臉形狀,而高分辨率層則控制光線和紋理等細節。
Toonify Yourself使用的 Layer Swapping 腳本可以從原始圖片中提取高分辨率層,并從預訓練模塊的微調模型中提取低分辨率層,最終得到具有卡通人臉結構,且和照片一樣逼真的混合模型。
或許在不久的將來,Vlogger們不止可以拍出真人視頻,還可以通過這一技術拍出不遜于迪士尼大片的動畫視頻來。

在人工智能越來越發達的現在,許多我們原先認為的復雜工作,都可以輕松解決。這就解放了許多人的生產力,也降低了不少工作的門檻。
小黑始終相信,人工智能可以讓我們在進行創作時,有更輕松的工作方式。相信通過它的不斷發展,我們可以在最后真正擺脫那些繁瑣無用的工作,給每一個人的創意添上一雙翅膀。
圖源:網絡、官網
請輸入評論內容...
請輸入評論/評論長度6~500個字


分享













