电子学报
電子學報
전자학보
Acta Electronica Sinica
2015年
11期
2263-2270
,共8页
徐超%聂勇伟%葛红美%周国富
徐超%聶勇偉%葛紅美%週國富
서초%섭용위%갈홍미%주국부
新视角合成%交互式视频摘要浏览%单张图片场景重建%速度障碍法
新視角閤成%交互式視頻摘要瀏覽%單張圖片場景重建%速度障礙法
신시각합성%교호식시빈적요류람%단장도편장경중건%속도장애법
novel-view synthesis%dynamic 3D video synopsis%single image scene reconstruction%velocity obstacles
现有视频摘要方法大多仅在固定视角下对视频内容进行压缩,限制了视频内容的浏览空间,导致压缩后的视频内容相互碰撞和遮挡。最近的方法改变视频内容的时空关系,但导致摘要结果与原始视频的相似度降低。本文研究基于新视角合成技术的交互式摘要视频浏览算法,通过为视频内容构建新的观察视角,增加视频浏览空间,从本质上减少视频内容碰撞和遮挡的可能性。为完全避免碰撞现象,提出了特定视角下投影遮挡消除技术,仅需较小地改变视频内容的时空关系,保证摘要视频与原始视频内容的一致性。最后,为方便用户交互式浏览摘要视频,构建了观察视角自动生成算法,根据当前摘要内容实时推荐并调整到最优观察视角。实验结果和用户调查表明本文提出的交互式视频摘要算法能有效压缩视频冗余信息,提高了摘要视频准确度、易理解程度。
現有視頻摘要方法大多僅在固定視角下對視頻內容進行壓縮,限製瞭視頻內容的瀏覽空間,導緻壓縮後的視頻內容相互踫撞和遮擋。最近的方法改變視頻內容的時空關繫,但導緻摘要結果與原始視頻的相似度降低。本文研究基于新視角閤成技術的交互式摘要視頻瀏覽算法,通過為視頻內容構建新的觀察視角,增加視頻瀏覽空間,從本質上減少視頻內容踫撞和遮擋的可能性。為完全避免踫撞現象,提齣瞭特定視角下投影遮擋消除技術,僅需較小地改變視頻內容的時空關繫,保證摘要視頻與原始視頻內容的一緻性。最後,為方便用戶交互式瀏覽摘要視頻,構建瞭觀察視角自動生成算法,根據噹前摘要內容實時推薦併調整到最優觀察視角。實驗結果和用戶調查錶明本文提齣的交互式視頻摘要算法能有效壓縮視頻冗餘信息,提高瞭摘要視頻準確度、易理解程度。
현유시빈적요방법대다부재고정시각하대시빈내용진행압축,한제료시빈내용적류람공간,도치압축후적시빈내용상호팽당화차당。최근적방법개변시빈내용적시공관계,단도치적요결과여원시시빈적상사도강저。본문연구기우신시각합성기술적교호식적요시빈류람산법,통과위시빈내용구건신적관찰시각,증가시빈류람공간,종본질상감소시빈내용팽당화차당적가능성。위완전피면팽당현상,제출료특정시각하투영차당소제기술,부수교소지개변시빈내용적시공관계,보증적요시빈여원시시빈내용적일치성。최후,위방편용호교호식류람적요시빈,구건료관찰시각자동생성산법,근거당전적요내용실시추천병조정도최우관찰시각。실험결과화용호조사표명본문제출적교호식시빈적요산법능유효압축시빈용여신식,제고료적요시빈준학도、역리해정도。
Most of the previous video synopsis methods compact the video under a fixed viewpoint,which limits the brows-ing space of the video.Recent method changes the spatiotemporal relationships between video objects with the side-effect of reduc-ing the accuracy of synopsized video.This paper presents a novel-view synthesis based interactive video synopsis browsing method. Our method constructs wider browsing space that can inherently reduce the probability of collision and occlusion occurrences.To completely remove collision and occlusion artifacts,we propose a projective occlusion removing algorithm for a specified viewpoint, slightly changing the relationships between video objects.Finally,to facilitate user interactive browsing the video,we further propose an automatic viewpoint suggestion method,to compute and adjust to the optimal viewpoint in real-time according to current synop-sized contents.The experiments and user study demonstrate the effectiveness of our method.