基于深度特征的手繪草圖檢索圖像方法研究.pdf

1、近年來，觸屏設(shè)備和手寫設(shè)備的廣泛普及，以及表情包的流行，使得人們開始嘗試用手繪草圖來替代文字或語言進(jìn)行抽象表達(dá)。在繪制草圖的過程中，人們可以很輕松地表達(dá)頭腦里浮現(xiàn)的任何事物和想法，然后通過繪制的草圖在現(xiàn)用圖像數(shù)據(jù)庫(kù)中尋找到與之匹配相似的圖像內(nèi)容。這種利用手繪草圖來表達(dá)想法的方式符合人類最原始的感知方式。并且，不同知識(shí)文化水平、不同繪畫水準(zhǔn)或不同年齡段的人都可以利用這種方式來表述所見到的自然圖像。因此，國(guó)內(nèi)外都有不少的機(jī)構(gòu)和學(xué)者在基于手繪

2、草圖檢索自然圖像的技術(shù)上重點(diǎn)關(guān)注并投入大量研究。
　　當(dāng)前手繪草圖的研究大多都是基于手工特征，包括二值特征以及自然圖像特征等；再使用中級(jí)特征編碼的方式來合成最終的手繪草圖的特征表示，進(jìn)而以用于手繪草圖檢索。然而手繪草圖具有極大的抽象性，不同的人繪制的同一目標(biāo)物體具有很大的外觀視覺差別，這導(dǎo)致基于傳統(tǒng)手工特征表示的手繪圖檢索自然圖像效果過分依賴于手繪圖線條的繪制水平。因此，基于傳統(tǒng)手工特征的檢索系統(tǒng)的性能一般，魯棒性較差，很難做到實(shí)

3、用水平。
　　在本文中，我們顯示深度卷積神經(jīng)網(wǎng)絡(luò)（DCNN）也適合跨域圖像識(shí)別，即使用手繪草圖作為查詢來檢索大型數(shù)據(jù)集中的自然圖像。為了解決這種跨域問題，我們提出一種新穎的聯(lián)合圖像數(shù)據(jù)和草圖數(shù)據(jù)訓(xùn)練CNN的方式，進(jìn)而學(xué)習(xí)得到深度草圖特征（DSF）。這種深度草圖特征對(duì)于手繪圖檢索自然圖像的任務(wù)非常有效，我們僅僅在這種深度草圖特征上使用簡(jiǎn)單的歐幾里得距離就可以獲得優(yōu)于其它技術(shù)的領(lǐng)先水平。此外，我們發(fā)現(xiàn)，在標(biāo)準(zhǔn)的手繪草圖識(shí)別基準(zhǔn)中，用預(yù)