例如，人類可以在腦海中合成未察覺的事件，以想象在高峰時(shí)段空蕩蕩的街道會(huì)是什么樣子。計(jì)算機(jī)的類似功能可能在電影制作或增強(qiáng)現(xiàn)實(shí)中很有用。最近的一篇論文提出了GeoSim，這是一種逼真的圖像處理框架，可將動(dòng)態(tài)對(duì)象插入現(xiàn)有視頻中。

這種方法使用自動(dòng)駕駛汽車捕獲的數(shù)據(jù)來構(gòu)建3D資產(chǎn)銀行。然后使用來自LiDAR讀數(shù)和3D地圖的3D場(chǎng)景布局在合理位置添加車輛。使用智能駕駛員模型，以便新對(duì)象與現(xiàn)有對(duì)象具有真實(shí)的交互并尊重交通流量。神經(jīng)網(wǎng)絡(luò)用于通過填充孔洞、調(diào)整顏色不一致和去除尖銳邊界來無縫插入對(duì)象。這是第一種充分考慮物理現(xiàn)實(shí)性并通過定性和定量措施優(yōu)于先前研究的方法。

可擴(kuò)展的傳感器仿真是自動(dòng)駕駛等安全關(guān)鍵領(lǐng)域的一個(gè)重要但具有挑戰(zhàn)性的開放問題。當(dāng)前的圖像模擬工作要么不能達(dá)到照片般逼真，要么不能對(duì)3D環(huán)境和其中的動(dòng)態(tài)對(duì)象進(jìn)行建模，從而失去高級(jí)控制和物理真實(shí)感。在本文中，我們介紹了GeoSim，這是一種幾何感知圖像合成過程，它通過使用從其他場(chǎng)景中提取并以新穎姿勢(shì)渲染的動(dòng)態(tài)對(duì)象來增強(qiáng)現(xiàn)有圖像來合成新穎的城市駕駛場(chǎng)景。為實(shí)現(xiàn)這一目標(biāo)，我們首先從傳感器數(shù)據(jù)中構(gòu)建了具有逼真幾何形狀和外觀的多樣化3D對(duì)象庫(kù)。在模擬過程中，我們執(zhí)行一種新穎的幾何感知模擬合成程序，其中1)將合理且逼真的對(duì)象放置到給定場(chǎng)景中，2)渲染來自資產(chǎn)銀行的動(dòng)態(tài)對(duì)象的新穎視圖，以及3)組合和混合渲染的圖像片段。生成的合成圖像具有真實(shí)感、流量感知和幾何一致性，允許圖像模擬擴(kuò)展到復(fù)雜的用例。我們展示了兩個(gè)這樣重要的應(yīng)用：跨多個(gè)攝像頭傳感器的遠(yuǎn)程真實(shí)視頻模擬，以及用于下游分割任務(wù)數(shù)據(jù)增強(qiáng)的合成數(shù)據(jù)生成。

　　免責(zé)聲明：本文由用戶上傳，與本網(wǎng)站立場(chǎng)無關(guān)。財(cái)經(jīng)信息僅供讀者參考，并不構(gòu)成投資建議。投資者據(jù)此操作，風(fēng)險(xiǎn)自擔(dān)。 如有侵權(quán)請(qǐng)聯(lián)系刪除！