“要想打造一個逼真的化身,基礎在於測量”,Codex Avatars研究科學家托馬斯·西蒙說。
化身要做到以假亂真靠的是精確的資料,這需要良好的測量。因此,構建真實化身的關鍵是找到一種方法來測量人類表情中的物理細節,比如一個人眯起眼睛或皺起鼻子的方式。
在匹茲堡實驗室的Codec Avatars團隊,使用了兩個主要的模組來測量人類的表情:編碼器和解碼器。
首先,編碼器使用攝像頭來捕捉受試者正在做什麼,然後將捕獲的資訊組裝成一個唯一的編碼,用來表示一個人的身體和環境狀態,這個編碼可以隨時傳送到任何需要的地方。然後,解碼器再將該編碼轉換為影片訊號。
普通的智慧手機攝像頭也能拍攝生動的影片。不過,Codec Avatars可是海量物理資料和複雜軟體的結合,比想象中要複雜得多。
Codec Avatars專案在捕捉人臉細節時,使用了數百個高解析度相機,而每個相機又會以每秒1 GB的速度捕獲資料。