CAJ | 학술논문

文中提出一种基于用户关注空间与注意力分析的视频内容理解方法,该方法可以有效地获得多通道的视频关注信息,并可使用户根据个性化需求定制视频关注内容,实现视频的高效浏览与访问.首先采用基于二叉层次型结构与分类器选择的音频分类算法将视频中的主要声音类型分类,然后将视频中影响用户注意力的视觉、听觉、时序因素定义为用户关注空间,分别使用相应的中层特征在这三个方面对用户注意力进行表示并计算其关注度,从而在音视频底层特征与高层认知之间建立有机过渡.作者设计了顺序决策融合算法来融合视觉与听觉关注度,生成关注度时序变化曲线并获得精彩摘要.最后使用支持向量回归模型并引入相关反馈机制来实现用户个性化的精彩片段排序.该项工作的特点是通过建立符合人类认知规律的关注度模型并结合相关反馈技术,对视频内容进行类人理解.实验证明,该方法对提取与生成符合用户个性化要求的视频摘要及排序结果具有良好的效果.
문중제출일충기우용호관주공간여주의력분석적시빈내용리해방법,해방법가이유효지획득다통도적시빈관주신식,병가사용호근거개성화수구정제시빈관주내용,실현시빈적고효류람여방문.수선채용기우이차층차형결구여분류기선택적음빈분류산법장시빈중적주요성음류형분류,연후장시빈중영향용호주의력적시각、은각、시서인소정의위용호관주공간,분별사용상응적중층특정재저삼개방면대용호주의력진행표시병계산기관주도,종이재음시빈저층특정여고층인지지간건립유궤과도.작자설계료순서결책융합산법래융합시각여은각관주도,생성관주도시서변화곡선병획득정채적요.최후사용지지향량회귀모형병인입상관반궤궤제래실현용호개성화적정채편단배서.해항공작적특점시통과건립부합인류인지규률적관주도모형병결합상관반궤기술,대시빈내용진행류인리해.실험증명,해방법대제취여생성부합용호개성화요구적시빈적요급배서결과구유량호적효과.