卡口大數(shù)據(jù)管理應(yīng)用平臺(tái)標(biāo)準(zhǔn)方案

1、1卡口大數(shù)據(jù)管理應(yīng)用平臺(tái)解決方案1 整體架構(gòu)設(shè)計(jì) 整體架構(gòu)設(shè)計(jì)1.1 總體設(shè)計(jì)目標(biāo) 總體設(shè)計(jì)目標(biāo)? 統(tǒng)一接入卡口過(guò)車數(shù)據(jù)和過(guò)車圖片，并按大數(shù)據(jù)架構(gòu)統(tǒng)一存儲(chǔ)管理。? 對(duì)入庫(kù)過(guò)車圖片進(jìn)行二次識(shí)別，單套設(shè)備支持不少于每天 200 萬(wàn)張卡口高清圖片二次識(shí)別。? 對(duì)上層提供統(tǒng)一的大數(shù)據(jù)共享訪問(wèn)服務(wù)和應(yīng)用支撐服務(wù)（采用WebService 接口方式）? 提供統(tǒng)一的大數(shù)據(jù)卡口稽查布控管理應(yīng)用軟件。? 基于 Hadoop 的大數(shù)據(jù)云存儲(chǔ)技術(shù)，實(shí)現(xiàn) PB

2、 級(jí)過(guò)車數(shù)據(jù)和過(guò)車圖片統(tǒng)一存儲(chǔ)和數(shù)據(jù)索引管理。? 基于 Hadoop 的大數(shù)據(jù)云計(jì)算技術(shù)，實(shí)現(xiàn)至少 100 億條以上的過(guò)車記錄大數(shù)據(jù)量 1 秒內(nèi)檢索能力。? 支持高速隨機(jī) Key-Value 的查詢/插入和低延時(shí)的統(tǒng)計(jì)能力，單臺(tái)服務(wù)器數(shù)據(jù)插入性能可達(dá)到 7 千記錄/秒（每條記錄 1KB） 。? 通過(guò)不停機(jī)添加計(jì)算節(jié)點(diǎn)，可線性提高系統(tǒng)的存儲(chǔ)容量和查詢、統(tǒng)計(jì)、分析、計(jì)算能力，計(jì)算延時(shí)可線性降低。集群規(guī)模達(dá)到 10 臺(tái)時(shí)，性能可達(dá)到 7 萬(wàn)記

3、錄/秒。3化數(shù)據(jù)的混合存取，并提供有高效的數(shù)據(jù)索引/檢索智能算法，擁有成本低、效率高、擴(kuò)展好、高可靠等多項(xiàng)優(yōu)勢(shì)特性。管理服務(wù)器（主）SCD1000-CN管理服務(wù)器（備）SCD1000-CN數(shù)據(jù)服務(wù)器 SCD1000-DN數(shù)據(jù)服務(wù)器 SCD1000-DN數(shù)據(jù)服務(wù)器 SCD1000-DN數(shù)據(jù)服務(wù)器 SCD1000-DNScale Out 平行擴(kuò)展1. 統(tǒng)一接入存儲(chǔ)大數(shù)據(jù)一體機(jī)業(yè)務(wù)集群提供統(tǒng)一接入接口，將各監(jiān)控設(shè)備上的卡口數(shù)據(jù)通過(guò)同一接口寫入

4、大數(shù)據(jù)中心。在查詢時(shí)，各操作人員使用的信息系統(tǒng)也可以通過(guò)統(tǒng)一接入接口對(duì)數(shù)據(jù)進(jìn)行讀取、查詢、統(tǒng)計(jì)等工作。2. 高性能高并發(fā)實(shí)時(shí)數(shù)據(jù)讀寫由于卡口數(shù)據(jù)系統(tǒng)每秒鐘都由幾千個(gè)終端產(chǎn)生海量的數(shù)據(jù)，大數(shù)據(jù)一體機(jī)業(yè)務(wù)集群能夠提供高性能和高并發(fā)的實(shí)時(shí)數(shù)據(jù)讀寫。如果在性能上不能到達(dá)要求，就會(huì)產(chǎn)生寫不進(jìn)查不出等問(wèn)題，造成系統(tǒng)無(wú)法使用。3. 海量數(shù)據(jù)存儲(chǔ)能力基于公安卡口數(shù)據(jù)的特點(diǎn)，在加入冗余容錯(cuò)的需求下，大數(shù)據(jù)一體機(jī)業(yè)務(wù)集群具備 PB 數(shù)據(jù)級(jí)別的在線存儲(chǔ)能力。