电子学报
電子學報
전자학보
ACTA ELECTRONICA SINICA
2014年
5期
987-991
,共5页
图像语义标注%跨媒体%主题模型%加权融合
圖像語義標註%跨媒體%主題模型%加權融閤
도상어의표주%과매체%주제모형%가권융합
image semantic annotation%cross media%topic model%topic-weighted fusion
图像语义标注是图像语义分析研究中的一个重要问题。在主题模型的基础上,本文提出一种新颖的跨媒体图像标注方法来进行图像间语义的传播。首先,对训练图像使用主题模型,抽取视觉模态和文本模态信息的潜在语义主题。然后,通过使用一个权重参数来融合两种模态信息的主题分布,从而学习到一种融合主题分布。最后,在融合主题分布的基础上训练一个标注模型来给目标图像赋予合适的语义信息。在标准的MSRC和Corel5K数据集上将提出的方法与最近著名的标注方法进行比较实验。标注性能的详细评价结果表明提出方法的有效性。
圖像語義標註是圖像語義分析研究中的一箇重要問題。在主題模型的基礎上,本文提齣一種新穎的跨媒體圖像標註方法來進行圖像間語義的傳播。首先,對訓練圖像使用主題模型,抽取視覺模態和文本模態信息的潛在語義主題。然後,通過使用一箇權重參數來融閤兩種模態信息的主題分佈,從而學習到一種融閤主題分佈。最後,在融閤主題分佈的基礎上訓練一箇標註模型來給目標圖像賦予閤適的語義信息。在標準的MSRC和Corel5K數據集上將提齣的方法與最近著名的標註方法進行比較實驗。標註性能的詳細評價結果錶明提齣方法的有效性。
도상어의표주시도상어의분석연구중적일개중요문제。재주제모형적기출상,본문제출일충신영적과매체도상표주방법래진행도상간어의적전파。수선,대훈련도상사용주제모형,추취시각모태화문본모태신식적잠재어의주제。연후,통과사용일개권중삼수래융합량충모태신식적주제분포,종이학습도일충융합주제분포。최후,재융합주제분포적기출상훈련일개표주모형래급목표도상부여합괄적어의신식。재표준적MSRC화Corel5K수거집상장제출적방법여최근저명적표주방법진행비교실험。표주성능적상세평개결과표명제출방법적유효성。
Image semantic annotation is an important issue in image semantic analysis research .Based on the topic model , this paper proposes a novel cross-media image annotation approach for propagating the semantics among images .First ,the topic model is used to capture the latent semantic topics from the visual and textual modal information in the training images .Then ,a fused topic distribution is learned by merging the topic distribution of each modality using a weight parameter .Finally ,an annotation model based on the fused topic distribution is trained to assign the target images using appropriate semantics .A comparison of the proposed approach with the recent state-of-the-art annotation approaches on the standard MSRC and Corel5K datasets is presented , and a detailed evaluation of the performance shows the validity of our approach .