編譯/VR陀螺
Facebook在2019年3月首次展示了超逼真頭像Codec Avatars的制作過程,當時生成Codec Avatar需要用到一個名為MUGSY的專用捕捉設備和171個高分辨率攝像機。
圖源:Meta
不過Meta的最新研究極大降低了這一門檻,用戶可以通過帶有前置深度傳感器的智能手機(比如搭載Face ID的iPhone)掃描臉部以生成頭像。
在使用的時候,你需要将手機靠近臉部,然後按照引導做出65種面部表情動作。不過,當前系統隻能用于處理面部,眼鏡或長發等特征還無法很好還原。
圖源:Meta
Meta研究人員指出,整個掃描過程僅需花費三分半鐘。不過後續頭像的渲染工作需要依賴一台配備4個高端GPU的機器,總耗時長達6小時。如果未來Meta的Codec Avatars正式對外推出,渲染工作可能會部署在雲端進行。
曾經需要多達171個攝像機才能完成的工作,如今通過一部手機就能完成,它背後用到了一個名為“hypernetwork”的通用先驗模型,研究人員曾使用先進的捕捉設備(類似于MUGSY,但用到的攝像頭為90個)掃描255個不同的面部特征以此訓練這個模型。
通過智能手機掃描生成頭像并非什麼新鮮技術,但Meta表示它的頭像生成質量要更優。
圖源:網絡
如果該功能要實現交付,未來還有很長一段的路要走。 受到設備算力等因素影響,目前Meta的Avatars隻有卡通風格形象。此前紮克伯格接受Lex Fridman采訪時表示,未來你可能會在遊戲中使用表現主義(卡通)化身,而在工作會議中使用現實主義化身。
來源:Upload
,