通常情況下，需要昂貴的設備和專(zhuān)業(yè)知識來(lái)創(chuàng )建一個(gè)準確的三維重建某人的臉，這是現實(shí)的，看起來(lái)不可怕。 現在，卡內基梅隆大學(xué)的研究人員利用普通智能手機上錄制的視頻完成了這一壯舉。

使用智能手機拍攝面部正面和側面的連續視頻，生成密集的數據云。 由CMU的機器人研究所開(kāi)發(fā)的一個(gè)兩步過(guò)程利用這些數據，在深度學(xué)習算法的一些幫助下，構建面部的數字重建。 該團隊的實(shí)驗表明，他們的方法可以達到亞毫米的精度，優(yōu)于其他基于相機的過(guò)程..

數字人臉可用于為游戲或虛擬或增強現實(shí)構建化身，也可用于動(dòng)畫(huà)、生物識別甚至醫療程序。 一個(gè)準確的三維渲染面部也可能有助于建立定制的外科口罩或呼吸器。

機器人研究所的副研究教授SimonLucey說(shuō)：“在計算機視覺(jué)和圖形學(xué)中，建立面部三維重建一直是一個(gè)懸而未決的問(wèn)題，因為人們對面部特征的外觀(guān)非常敏感。” “即使是重建過(guò)程中的輕微異常也會(huì )使最終結果看起來(lái)不切實(shí)際。”

激光掃描儀，結構光和多攝像機工作室設置可以產(chǎn)生高度精確的面部掃描，但這些專(zhuān)門(mén)的傳感器是令人望而卻步的大多數應用。 然而，CMU新開(kāi)發(fā)的方法只需要一部智能手機。

這種方法是盧西與碩士生Shubham Agrawal和Anuj Pahuja共同開(kāi)發(fā)的，于3月初在科羅拉多州斯諾麥斯舉行的IEEE計算機視覺(jué)應用冬季會(huì )議上提出。 它從拍攝15-20秒的視頻開(kāi)始。 在這種情況下，研究人員使用一個(gè)iPhoneX在慢動(dòng)作設置..

盧西說(shuō)：“慢速運動(dòng)的高幀速率是我們方法的關(guān)鍵之一，因為它產(chǎn)生了密集的點(diǎn)云。”