用視頻時間金字塔可視化時間的流逝
我們使用不同的技術(shù)以多種速度可視化我們周圍的世界，例如慢動作和延時攝影。arXiv.org最近的一篇論文提出了視頻時間金字塔，這是一種可視化不同時間尺度變化的方法，以及一種用于導航和探索金字塔的可視化工具。
金字塔由一系列新視頻組成，每個視頻都提煉出在特定時間尺度發(fā)生的變化。它提供流暢的觀看體驗，沒有鋸齒或閃爍效果。視頻頻譜圖繪制了時間與時間尺度的關(guān)系，顯示了強烈的循環(huán)變化(例如白天/黑夜)的清晰模式。用戶可以先進行概覽掃描，然后深入到較低的時間尺度以查看更多詳細信息。
研究人員使用不同戶外場景(如建筑工地)的多個長時間網(wǎng)絡攝像頭數(shù)據(jù)集來驗證該方法。
我們可以通過觀察幾個月或幾年來了解一個場景?長時間錄制的視頻將在多個時間尺度上描繪有趣的現(xiàn)象，但識別和查看它們是一項挑戰(zhàn)。視頻太長無法完整觀看，有些事件太慢無法實時體驗，例如冰川退縮。延時攝影是總結(jié)長視頻和可視化慢時間尺度的常用方法。然而，延時攝影僅限于單個選擇的時間頻率，并且由于幀之間的混疊和時間不連續(xù)性而經(jīng)常出現(xiàn)閃爍。在本文中，我們提出了視頻時間金字塔，一種解決這些限制并擴展可視化時間流逝的可能性的技術(shù)。受計算機視覺空間圖像金字塔的啟發(fā)，我們開發(fā)了一種在時域中構(gòu)建視頻金字塔的算法。視頻時間金字塔的每一層都可視化不同的時間尺度;例如，每月時間尺度的視頻通常適合可視化季節(jié)變化，而一分鐘時間尺度的視頻最適合可視化日出或天空中云層的移動。為了幫助探索不同的金字塔級別，我們還提出了一個視頻頻譜圖來可視化整個金字塔的活動量，提供場景動態(tài)的整體概覽以及跨時間和跨時間尺度探索和發(fā)現(xiàn)現(xiàn)象的能力。為了演示我們的方法，我們從十個戶外場景構(gòu)建了視頻時間金字塔，每個場景都包含數(shù)月或數(shù)年的數(shù)據(jù)。我們將視頻時間金字塔層與幼稚的延時攝影進行比較，發(fā)現(xiàn)我們的金字塔可以無別名查看長期變化。我們還展示了視頻頻譜圖通過啟用概覽和注重細節(jié)的視角促進了跨金字塔級別的現(xiàn)象的探索和發(fā)現(xiàn)。
標簽：