Video Object Retrieval by Trajectory and Appearance

Yuan-Hao Lai Chuan-Kai Yang

Computer Graphics & Multimedia Lab., NTUST


 

Abstract

隨著網際網路、監視器與手持裝置的發展,大量的影片資料每天被人們製作產生及分享。因此如何管理,並從大量的影片資料中快速地找到想要的影片,成為了一個重要的課題。在傳統影片搜尋系統中,使用者多半是透過輸入文字,來從影片的標題資訊、註解甚至是影片被嵌入網頁中的文字資訊尋找資料。並依據字詞相關度、交互點閱次數來進行排序。有時這些文字資料並不能代表影片內容中所含有的全部資訊。
因此我們建置了一個能讓使用者透過指定影片中物體移動的軌跡、物體外觀等資訊進行更直觀的搜尋。進而提供保全與軍事系統之入侵行為分析、未來將可應用於攜帶型裝置。


Download
[PPT] [Video]

Figures

圖1. 本研究系統架構

圖2. 原影格及Gaussian Mixture Model

圖3. (上)物體在時空間中之軌跡(左)(右)分別使用高/低階數維度曲線之耦合結果

圖4. 將測試集中的軌跡分群並計算其代表軌跡

圖5. 物體在影格中之矩形子區域

圖6. (左)使用者描繪之查詢線段(右)方便編輯之B-spline曲線與控制點

圖7. 搜尋結果預覽