安防大數(shù)據(jù)時(shí)代 海量信息處理是關(guān)鍵

大數(shù)據(jù)視頻架構(gòu)是革命性的技術(shù)，特別在實(shí)時(shí)智能分析和數(shù)據(jù)挖掘方面，讓視頻監(jiān)控從人工抽檢，進(jìn)步到高效事前預(yù)警、事后分析，實(shí)現(xiàn)智能化的信息分析、預(yù)測，為視頻監(jiān)控領(lǐng)域業(yè)務(wù)帶來深刻的變革。大數(shù)據(jù)時(shí)代，海量信息處理是關(guān)鍵，這對于監(jiān)控構(gòu)架的應(yīng)用更顯得具有價(jià)值。

安防大數(shù)據(jù)時(shí)代，海量信息處理是關(guān)鍵

視頻圖像監(jiān)控系統(tǒng)通過多年的建設(shè)，已成為公安機(jī)關(guān)打防管控的重要手段和感知城市信息的重要途徑。隨著視頻監(jiān)控系統(tǒng)建設(shè)的不斷發(fā)展和壯大，對大量的音視頻信息的分析，需要耗用大量的人力物力和時(shí)間。

海量的視頻數(shù)據(jù)需要得到有效的處理，使得能夠快速、低成本、精準(zhǔn)的發(fā)現(xiàn)相關(guān)目標(biāo)的特征和活動(dòng)軌跡。而有限的人力、計(jì)算能力，和持續(xù)增長的視頻數(shù)據(jù)之間的矛盾日益突出，成為當(dāng)下系統(tǒng)建設(shè)的重點(diǎn)和難點(diǎn)。為此，行業(yè)中近年來提出了視頻濃縮與檢索技術(shù)，以及視頻圖像信息數(shù)據(jù)庫技術(shù)。
大數(shù)據(jù)技術(shù)革新，監(jiān)控架構(gòu)更加靈活

視頻監(jiān)控業(yè)務(wù)的核心就是數(shù)據(jù)，數(shù)據(jù)就是業(yè)務(wù)本身，那么基于大數(shù)據(jù)架構(gòu)，可以給中大型的視頻監(jiān)控項(xiàng)目帶來諸多的裨益。

第一，架構(gòu)更加靈活，伸縮彈性更大
對于一些中大型項(xiàng)目，由于起點(diǎn)的差異，缺乏視頻監(jiān)控架構(gòu)的頂層設(shè)計(jì)，后期的擴(kuò)容升級難免尾大不掉，如在建設(shè)初期就引入面向大數(shù)據(jù)的架構(gòu)，為業(yè)務(wù)擴(kuò)張和管理帶來好處。

第二，以廉價(jià)通用硬件迎合視頻監(jiān)控?cái)?shù)據(jù)的爆發(fā)性增長
在面向大數(shù)據(jù)的架構(gòu)中，可根據(jù)視頻監(jiān)控業(yè)務(wù)的部署需要，設(shè)立多個(gè)HDFS集群組成，采集的流數(shù)據(jù)會(huì)被劃分成段，并分布于數(shù)據(jù)節(jié)點(diǎn)，這些數(shù)據(jù)節(jié)點(diǎn)可以采用廉價(jià)通用型的硬件，由軟件技術(shù)保證其高可靠性，這種方式避免采用傳統(tǒng)高端硬件的模式，大大降低投資成本。

第三，通過高速并行計(jì)算實(shí)現(xiàn)智能分析和數(shù)據(jù)挖掘
對于金礦來講，唯有熠熠發(fā)光的金子才是有價(jià)值，視頻監(jiān)控?cái)?shù)據(jù)就猶如這樣一座金礦，傳統(tǒng)人工和串行的數(shù)據(jù)篩選方式已在大數(shù)據(jù)時(shí)代不能滿足要求。面向大數(shù)據(jù)的架構(gòu)原理就是將海量數(shù)據(jù)分解為較小的更易訪問的批量數(shù)據(jù)，在多臺(tái)服務(wù)器上并行分析處理，從而大大加快視頻數(shù)據(jù)的處理進(jìn)程。

結(jié)合視頻監(jiān)控業(yè)務(wù)特點(diǎn)，引入Hadoop的架構(gòu)，以頂層設(shè)計(jì)的視角來構(gòu)建面向大數(shù)據(jù)視頻監(jiān)控架構(gòu)，將對未來視頻監(jiān)控業(yè)務(wù)的規(guī)劃設(shè)計(jì)產(chǎn)生深遠(yuǎn)的影響。下面簡要描述下大數(shù)據(jù)視頻監(jiān)控邏輯架構(gòu)。
數(shù)據(jù)源層，包括實(shí)時(shí)數(shù)據(jù)和非實(shí)時(shí)數(shù)據(jù)。實(shí)時(shí)數(shù)據(jù)指IP攝像頭和傳感器產(chǎn)生的實(shí)時(shí)流媒體數(shù)據(jù)。非實(shí)時(shí)數(shù)據(jù)指從DVR、編碼器、第三方系統(tǒng)導(dǎo)入的媒體數(shù)據(jù)。

大數(shù)據(jù)存儲(chǔ)層，采用了HDFS和HBASE，實(shí)現(xiàn)數(shù)據(jù)低成本、高可靠的管理。把采集的視頻流保存在HDFS集群內(nèi)，并通過HBase建立訪問的索引。把傳統(tǒng)NVR和專用存儲(chǔ)進(jìn)行重構(gòu)，納入到整體的分布式文件系統(tǒng)中來。
大數(shù)據(jù)計(jì)算層，實(shí)現(xiàn)智能分析和數(shù)據(jù)挖掘。通過MapReduce把對大視頻的分析進(jìn)行分解，充分利用閑置資源，把計(jì)算任務(wù)交由多臺(tái)服務(wù)器進(jìn)行并行計(jì)算分析，另外一方面，根據(jù)智能分析產(chǎn)生的視頻元數(shù)據(jù)，通過Hive挖掘視頻元數(shù)據(jù)的價(jià)值信息。

業(yè)務(wù)及管理層，實(shí)現(xiàn)設(shè)備和業(yè)務(wù)管理?；赯ookeeper組成的服務(wù)器集群，可以保證業(yè)務(wù)系統(tǒng)的無故障運(yùn)營，基于Ganglia實(shí)現(xiàn)對攝像頭等設(shè)備的監(jiān)管。

基于大數(shù)據(jù)的視頻架構(gòu)，本質(zhì)上是把視頻數(shù)據(jù)作為最有價(jià)值的資產(chǎn)，以數(shù)據(jù)作為核心來構(gòu)建的技術(shù)架構(gòu)，重點(diǎn)解決了海量的視頻數(shù)據(jù)分散和集中式存儲(chǔ)并存、多級分布問題，極大提升了非結(jié)構(gòu)化視頻數(shù)據(jù)讀寫的效率，為視頻監(jiān)控的快速檢索、智能分析提供了端到端的解決方案。

 來源：機(jī)房監(jiān)控 機(jī)房環(huán)境監(jiān)控 機(jī)房監(jiān)控系統(tǒng)    http://www.dr4xxf.cn