智能手機視頻可以進行高度逼真的3d面部重建
通常，需要昂貴的設(shè)備和專業(yè)知識來創(chuàng)建某人面部的精確3D重建，這是現(xiàn)實的，看起來并不可怕?，F(xiàn)在，卡內(nèi)基梅隆大學(xué)的研究人員通過使用普通智能手機上錄制的視頻完成了這一壯舉。
使用智能手機拍攝人臉正面和側(cè)面的連續(xù)視頻，生成密集的數(shù)據(jù)云。CMU機器人研究所開發(fā)的兩步過程利用這些數(shù)據(jù)，借助深度學(xué)習(xí)算法構(gòu)建人臉的數(shù)字重建。該團隊的實驗表明，他們的方法可以達(dá)到亞毫米精度，優(yōu)于其他基于相機的過程。
數(shù)字人臉可用于為游戲或虛擬或增強現(xiàn)實構(gòu)建頭像，也可用于動畫、生物識別甚至醫(yī)療程序。面部的精確3D渲染也可能有助于創(chuàng)建定制的外科口罩或呼吸器。
機器人研究所副教授SimonLucey說：“在計算機視覺和圖形學(xué)中，面部三維重建的建立一直是一個未解決的問題，因為人們對面部特征的外觀非常敏感?！?重建過程中哪怕是一點點異常都會讓最終結(jié)果看起來不切實際."
激光掃描儀、結(jié)構(gòu)光和多相機工作室設(shè)置可以產(chǎn)生高度精確的面部掃描，但這些專門的傳感器對大多數(shù)應(yīng)用來說是禁止的。然而，CMU新開發(fā)的方法只需要一部智能手機。
這種方法是由Lucie和碩士研究生Shubham Agrawal和Anuj Pahuja共同開發(fā)的，是在3月初于科羅拉多州斯諾Max舉行的IEEE計算機視覺應(yīng)用冬季會議上提出的。它從拍攝15-20秒的視頻開始。在這種情況下，研究人員在慢動作環(huán)境中使用了蘋果手機。
Luci說：“慢動作的高幀率是我們方法的關(guān)鍵之一，因為它會產(chǎn)生密集的點云。”
鄭重聲明：本文版權(quán)歸原作者所有。轉(zhuǎn)載文章只是為了傳播更多的信息。如果作者信息標(biāo)注有誤，請第一時間聯(lián)系我們修改或刪除。謝謝你。
標(biāo)簽：