光影研究室揭秘AI黑科技:火爆網絡的“童話臉”是怎樣煉成的?
(原標題:光影研究室揭秘AI黑科技:火爆網絡的“童話臉”是怎樣煉成的?)
每個人都有一個童話夢,童話世界的主人公通常天真、爛漫,是美好形象的象徵。假如有一天,可以穿越到童話世界中,你是否躍躍欲試?近期,騰訊光影研究室出品的“童話臉”特效玩法在網絡上迅速走紅,不僅有李雪琴親傳童話世界基本生存須知“公主並”,更是受到辣目洋子、劉曉慶、王大陸等衆多明星青睞。作爲業內首次將GAN技術與3D卡通風格相結合的應用特效,“童話臉”支持用戶化身爲人間芭比、在逃公主、童話王子等人物,分享在QQ小世界、微視APP、微博等社交平臺,不少用戶更是直接將變身後的童話臉設置爲個人頭像。
二次元當道,個性化“童話臉”特效應運而生
隨着年輕用戶在社交互動中的個性化表達需求持續增加,自帶二次元、萌元素的虛擬形象成爲了用戶展示自我情緒、日常交流的新形式。基於在用戶個性化形象創造上的長期積累,騰訊光影研究室上半年已推出2D日漫卡通畫特效,並受到廣大網友的一致好評。爲了更好地還原用戶的面部特徵以及情緒張力的表達,團隊將五官和神態捕捉都十分靈動的3D卡通風格作爲研發方向之一,並在權衡卡通化的趣味性和真實摹寫的用戶體驗後,最終打造了童話臉特效。
據團隊介紹,童話臉風格屬於卡通畫風格中的一種。卡通畫裡有不同分類,如寫實風,卡通風,日韓風,歐美風,中國風。但在技術實現層面,不同的風格意味着模型要學習紋理和形變的困難指數不一樣。其中,寫實風基本沒有形變,實現較簡單生成效果也最佳;卡通風形變較小且涉及紋理學習,存在一定的難度;Q版卡通風形變較大並涉及風格模型學習,難度最大。此次,“童話臉”特效便是將難度最大的Q版卡通風得以實現。目前,該特效技術已應用在QQ、微視APP等社交娛樂場景中,給用戶提供最直觀、新鮮的AI體驗。
GAN技術與3D卡通風格首次結合,左右互搏訓練生成完美圖片
由於傳統的CV算法基本不可能滿足需求,此次童話臉特效是基於先進的生成對抗網絡(GAN)算法研發而出,也是全球首家在手機上給用戶提供的實時個性化童話臉特效。具體而言,針對卡通童話臉大形變、CG質感紋理等特點,團隊在設計模型網絡結構策略上,將形變和紋理區分後再進行解耦,從而達到穩定生成卡通童話臉的目的。同時,結合複雜的實際應用場景下,更是在拍攝環境及角度、臉型妝容及濾鏡、機型性能差異等維度上持續打磨逼真效果,確保給用戶帶來愉悅、滿意、驚喜的體驗。
實際上,“童話臉”特效從啓動到上線僅花費兩週時間,並保持快速的模型迭代。高效率的研發升級得益於光影研究室在新技術上的提前積累、底層技術的深度優化和強大的工程能力支持。特效背後的GAN生成技術,在2020年上半年便已投入研發進行積累,通過對一定數量的圖片進行訓練,便能在一週內生成多版本模型進行上線。此前刷新微視視頻特效製作量新紀錄的王者臉,以及QQ上線的國內首創光頭特效,均是騰訊光影研究室利用生成式對抗網絡GAN所製造的獨特體驗。
伴隨新技術的不斷髮展和進步,AI在社交娛樂方面的應用也將變得更加豐富。作爲騰訊旗下專注於探索前沿影像處理技術的團隊,騰訊光影研究室通過酷炫的渲染能力與靈活便捷的特效玩法引擎,已賦能QQ、微視APP、全民K歌等多款產品。未來,團隊也將持續探索更多場景的創意玩法,爲用戶提供充滿趣味驚喜的社交新體驗。