基于多特征融合的網(wǎng)絡(luò)媒體綜合檢索.pdf

1、信息時代，萬物數(shù)字化，互聯(lián)網(wǎng)呈幾何級發(fā)展態(tài)勢，特別是網(wǎng)絡(luò)媒體(WebMedia)發(fā)展迅猛?；ヂ?lián)網(wǎng)的發(fā)展離不開數(shù)據(jù)的發(fā)展，這種發(fā)展不僅體現(xiàn)在數(shù)據(jù)規(guī)模急劇膨脹上，也體現(xiàn)在數(shù)據(jù)結(jié)構(gòu)日益復(fù)雜上:從傳統(tǒng)的單一文本模態(tài)向多種模態(tài)交錯融合發(fā)展。面對數(shù)量巨大，結(jié)構(gòu)復(fù)雜的多模態(tài)數(shù)據(jù)，傳統(tǒng)的信息檢索技術(shù)已經(jīng)不能滿足新形勢的需求。如何合理有效的處理海量數(shù)據(jù)信息，如何從多模態(tài)數(shù)據(jù)中精確高效的匹配出相關(guān)資源成為亟待解決的問題。
　　 本文從傳統(tǒng)信息檢索技

2、術(shù)出發(fā)，研究了單模態(tài)、多模態(tài)多媒體檢索技術(shù)的發(fā)展與現(xiàn)狀。通過整合現(xiàn)今成熟有效的多媒體分析索引方法、融合算法、結(jié)果合并算法，本文提出了一種基于多特征后融合的檢索框架。該框架的主要思想是分別分析各模態(tài)數(shù)據(jù)特征，根據(jù)各模態(tài)索引信息并行檢索，加權(quán)合并結(jié)果集。為了更好的處理規(guī)模龐大的結(jié)果集，該框架引入了ηTA合并算法，以部分合并精準(zhǔn)率換取高效的檢索速度。該框架以D-Ocean項目（編號:2010ZX01042-002-003）為依托進(jìn)行了算法集成

3、，并在實際應(yīng)用中進(jìn)行了測試和展示。實驗證明:相比單模態(tài)檢索方法，綜合框架有更好的檢索效果。另外，針對社會媒體海量的多模態(tài)數(shù)據(jù)，本文提出了一種基于多特征前融合建模的檢索框架。該框架采用兩次聚類的多特征融合方法，其主要思想是先分別對各模態(tài)數(shù)據(jù)進(jìn)行特征分析，進(jìn)行一次聚類，然后根據(jù)模態(tài)數(shù)據(jù)間的共生概率關(guān)系進(jìn)行二次聚類。該框架兼顧了各模態(tài)自身的特性和模態(tài)間的關(guān)聯(lián)性，提高了檢索質(zhì)量，并通過建立Lucene索引加快了檢索速度。實驗證明:相比基于CCA