發(fā)布時間：2024-06-29 16:01

　　隨著智慧城市的建設,人臉識別技術被應用在越來越多的場景中,其中對于怎樣在海量的圖片中進行人臉圖片存儲和快速檢索更是重要的研究課題。目前分布式文件系統(tǒng)在存儲系統(tǒng)中應用比較廣泛,且多以HDFS、GFS等分布式文件系統(tǒng)為主,但是它們主要應用在大文件方面。對于圖片的相似檢索主要是基于內(nèi)容的檢索,而且是通過提取圖片之間的特征向量進行距離計算從而衡量圖片之間的相似度,但人臉圖片的特征向量不僅復雜還多維,因而面對人臉圖片這種復雜多維的特征向量如何設計高效的索引是重要的技術問題。本文首先深入剖析當今主流的分布式文件系統(tǒng)針對圖片小文件存儲技術的性能瓶頸以及分析非對稱距離計算倒排索引機制(IVFADC)的原理后,提出針對性的解決方案。論文研究的內(nèi)容有以下兩點:1.本文分析當今主流的分布式文件系統(tǒng)的優(yōu)缺點后采用FastDFS分布式文件存儲系統(tǒng)作為海量人臉圖片的存儲,并設計圖片的存儲文件方案解決人臉圖片小文件的大容量存儲的問題,不僅有效地提升了海量人臉圖片的存儲速度,甚至設計的存儲文件還充分的利用了FastDFS的存儲空間。2.IVFADC是一個很好的將積量化,非對稱距離計算和倒排索引融合在一起處理高維度的索...

【文章頁數(shù)】：58 頁

【學位級別】：碩士

【部分圖文】：

圖2-1GFS結構圖

GFS雖然較之傳統(tǒng)的分布式文件系統(tǒng)有著較大的改善,但是面對海量圖片小文件存儲時,元數(shù)據(jù)的膨脹給主服務器帶來很大的存儲壓力,并且由于GFS是google最頂級的分布式文件系統(tǒng),有著核心技術和提供最底層的存儲,它的代碼并非開源,所以外界只能通過官方手冊去了解而不能通過底層代碼去研究[....

圖2-2HDFS的結構圖

HDFS是應用在Hadoop上為超大文件的存儲和處理設計的分布式文件系統(tǒng)。可以部署在一些廉價的服務器上[20]。它的組織結構圖如圖2-2所示,它主要由Client、NameNode、DataNode組成。Client用來管理HDFS、將文件分塊、從NameNode得知文件位置信....

圖2-3FastDFS存儲結構圖

FastDFS的組織架構如圖2-3所示。FastDFS由tracker(跟蹤器)、storage(存儲器)及client(客戶端)組成,且它們都可以由多個服務器組成。比如FastDFS有多個group(組),每個group可以由多臺服務器組成,同一個group內(nèi)的多臺服務器的存儲....

圖2-4多維索引結構圖

在基于內(nèi)容檢索的人臉圖像檢索系統(tǒng)中,多維度索引結構的創(chuàng)建是檢索模塊中的重點[33]。將人臉庫中的人臉圖片進行特征提取以后是一堆雜亂無章的高維向量,如何將這些高維向量進行有組織的存儲則是創(chuàng)建多維度索引的目的。多維度的索引結構雖然如圖2-4所示豐富多樣,但是當面對人臉圖片特征向量的高....

本文編號：3997797