大數據是最近最為火爆的技術概念，尤其是在貴陽召開的大數據博覽會之后，大數據已經成為國家和各個城市在IT基礎領域下一步的重點發展方向。不論政府、企業還是個人，都在關注如何采集數據，以及如何從數據中挖掘出有用的信息，進而創造社會價值、商業價值。互聯網是大數據最早發揮效用的行業，淘寶、京東、亞馬遜等電商企業通過對海量數據的掌握和分析,為用戶提供更加專業化和個性化的服務。大數據也在重構很多傳統行業，通過收集、整理生活中方方面面的數據，進行分析挖掘，從中獲得有價值信息，并衍化出新的商業模式。麥當勞、肯德基以及蘋果公司等旗艦專賣店的位置都是建立在數據分析基礎之上的精準選址。
隨著平安城市、智慧城市、工業4.0等項目和技術的推進，物聯網大數據逐步成為大數據發展的新方向。對遍布大街小巷的攝像頭、各類傳感器和工業生產數據等新的大數據來源進行分析挖掘的物聯網技術蓬勃發展。安防行業隨著高清化、智能化、網絡化、數字化的要求，數據量也迅速增加，早在幾年前就已踏入大數據的門檻。安防領域的“大數據”一般具有幾個特點：首先，數據量巨大，一個地級市30天的視頻錄像數據就已經是PB級；其次，區別于傳統的數據結構，安防領域的數據結構比較復雜，超過 80% 都是非結構化數據，比如智慧型平安城市建設中的視頻監控數據、卡口的抓拍照片、智能分析輸出的特征數據等；再次，數據更新快，視頻監控每秒鐘都在進行；最后，這些更個性化的數據在存儲后被要求能隨機訪問，這就要求新的物聯網大數據系統更加快捷地處理數據，更具智能地保存和管理數據。
二、大數據技術發展創新
基于大數據的智慧安防在技術方面重點應關注大數據處理技術和智能分析技術。大數據處理技術主要解決數據的采集、存儲和分析挖掘問題，而智能分析技術是為了實現對視頻的分析和理解，解決視頻結構化問題，推動視頻數據向視頻信息的轉變。
大數據應用主要涉及數據整合、數據存儲、挖掘應用等多方面和多層次。其中，大數據技術作為大數據應用的基礎設施保障至關重要。主要內容包括：
大數據采集和管理技術
（1）可擴展的數據描述規范
數據的快速增長迫切需要一套可擴展的數據描述規范，實現數據描述、數據存儲、共享和交換。現階段，數據的形式主要有源自攝像頭采集的視頻數據和其他各類復雜結構數據。設計面向多維數據的本體描述框架,可以較全面地描述多維語義內容。
（2）多維數據集成共性技術
數據抽取、轉換和加載(ETL)是解決異構多維數據一致性和集成化的有效方案，利用工具將數據按照統一的規則進行集成，完成數據從多數據源向統一目標數據庫的轉化。
大數據存儲技術
規模龐大的感知設備、繁多的業務系統每天產生海量的數據，這些數據既有結構化的，也有半結構化和非結構化的，這為數據的統一描述和存儲帶來了困難。
（1）資源描述元數據管理技術
資源描述元數據是海量異構數據實現透明訪問的基礎。通過擴充現有的數據對象和存儲資源描述方法，從多個方面描述數據的內在屬性（關鍵字、數據編碼格式等）、應用需求（性能、可用性、安全性、持久性等）和資源特性（位置、訪問方式、服務能力等），以支持智能分級的存儲虛擬化及存儲服務。
（2）基于時空域的視頻數據管理技術
根據視頻數據的時空域屬性信息，按需求將空間鄰近或時間鄰近的視頻數據進行歸類，并在存儲上進行關聯存儲，同時利用基于語義內容的去冗余技術，提升數據的價值密度。
（3）大數據存儲技術
百億甚至千億級的結構化數據為存儲和查詢帶來巨大壓力，傳統的關系型數據庫已無法支撐此類應用。采用針對海量數據特性設計的分布式數據存儲架構和列式數據庫技術，可以較好地滿足大數據存儲系統可擴展性、高可靠性的要求。
大數據檢索和挖掘技術
（1）分布式智能全文檢索技術
大數據僅僅依靠單節點進行智能全文檢索已遠遠無法滿足性能要求，采用分布式的多節點并行處理技術，能有效縮短響應時間，提高系統性能。
（2）基于圖像識別的檢索技術
智慧安防中存在海量的圖片數據，目前的檢索技術還是以特征文本描述檢索為主，這需要耗費大量的人力、物力開展特征描述，當數據持續增長時，這將是一個不可能的任務。采用圖像識別及模糊匹配技術，能真正滿足用戶的業務需求，并促進人臉匹配、步態匹配、行為匹配等應用的開展。
（3）關聯網絡可視化分析
利用可視化分析，將各種不同信息圖形化，建立不同數據來源、不同信息之間的公共元素和聯系，建立起不同實體之間的關聯，從而發現那些隱藏在大數據中的關聯性線索和情報。
三、大數據在智能交通領域的應用介紹
近年來，隨著經濟的快速發展，機動車持有量迅速增加，交通管理現狀和需求的矛盾進一步加劇。在此情況下，如何利用先進的科技手段提高交通管理水平，抑制交通事故發生，是當前交通管理部門亟待解決的問題。
針對交通管理部門的需求以及我國的道路特點，可通過整合圖像處理、模式識別等技術，實現對監控路段的機動車道、非機動車道進行全天候實時監控和數據采集。前端卡口處理系統對所拍攝的圖像進行分析獲取號牌號碼、號牌顏色、車身顏色、車標、車輛子品牌等數據，并將獲取到的車輛信息連同車輛的通過時間、地點、行駛方向等信息通過計算機網絡傳輸到卡口系統控制中心的數據庫中進行數據存儲、查詢、比對等處理，當發現肇事逃逸、違規或可疑車輛時，系統會自動向攔截系統及相關人員發出告警信號，為交通違章查糾、交通事故逃逸、盜搶機動車輛等案件的及時偵破提供重要的信息和證據。同時，隨著全城Smart系統的建設，新型的Smart IPC監控前端也將成為一個卡口系統，這使得城市卡口系統更加嚴密，能夠獲取到更多的過車數據，能更準確地描繪出車輛動態信息。
前端卡口系統還能及時準確地記錄經過卡口的目標信息，隨時掌握出入轄區的車輛流量狀態，為交通誘導提供重要的參考數據。為了解決海量過車數據分析的挑戰，智能交通要轉變思路，積極嘗試使用大數據技術來解決智能交通數據分析和挖掘問題。
某經濟發達地區城市，近一段時間，交通事故頻發，由于失駕和毒駕人員造成的惡性交通事件在在人民群眾帶來惡劣影響。市委領導決定開展一次交通整治行動，重點放在“黃標車、逾期未報廢車、套牌車、毒駕失駕人員、遮擋車牌”等重點交通違法行為的整治。除了加大路面巡邏的力度，也要求交警部門通過交通大數據對交通違法行為進行監控與挖掘。
交通大數據主要來源來自交通道路上卡口的過車記錄。但是卡口覆蓋范圍有限，能否從社會資源上獲取交通數據？通過協調，交警部門從停車場出入口、加油站、公共停車位等交通流量重點地區調取了監控視頻。通過海量視頻云分析平臺，將監控視頻中的車輛相關數據取出，包括車牌、車型、駕駛員特征，并存入大數據平臺。
套牌車分析采用兩種方案對比。對于本地車輛，通過比對同一個車牌記錄中的車型車管庫的車型，如果不一致，有可能是套牌車，可以提取出來進行下一步分析。對于外地車輛，采用時空分析方案。同一個車牌如果在同一時間段出現在距離很遠的兩處，則說明是套牌車，提取出來進行下一步分析。
毒駕和失駕人員是不允許駕駛機動車上路，否則會造成極大的交通隱患。交警部門通過現有的毒駕和失駕人員重點人員庫。當卡口部署的是高清卡口，可以將駕駛員頭部照片取出。將駕駛員照片和毒駕失駕人員庫中的照片進行自動人臉比對，如果相似度較高，說明有可能是毒駕失駕人員，提取出來進行下一步分析。
通過查詢卡口過車記錄中車牌缺失的車輛，即可查詢到車牌被遮擋的車輛。但是光發現車牌被遮擋車輛還遠遠不夠，還需要找到這輛車的真正車牌。這就需要使用交通大數據的以圖搜圖功能，通過被遮擋車牌車輛的特征在所有過車記錄中搜索，找到相似度最高的車輛，提取出來進行下一步分析。
查找過車記錄中車輛是否屬于黃標車或者逾期未報廢車輛。如果屬于，提取出來進行下一步處理。
通過以上幾種手段對根據通過交通大數據平臺分析出來的嫌疑車輛進行仔細排查，確認確實違法的，通過交通大數據平臺車輛軌跡分析功能獲取嫌疑車活動規律，預先設卡，攔截并處理。
本次整治行動共分析提取了過車記錄30多億條，分析社會視頻達到30萬小時，提取了70多個子系統的數據。在為期為半個月的整治期內，通過交通大數據平臺發現毒駕、失駕司機十多人，套牌車超過八十輛，未報廢車十幾輛。相關領導對交通大數據平臺在本次整治活動中的表現非常滿意，并表示“本次整治行動在交通大數據平臺協助下，有效并且高效的完成了預定目標”。
四、總結
基于大數據的智慧交通存在多種可能，交通的智能化是根本的趨勢，利用大數據技術和智能分析技術，整合城市管理的其他數據，將真正推動智慧交通建設，為交通管理奠定良好的基礎。目前大數據技術主要還是應用在交警和交管部門道路，隨著交通數據的進一步聯網開放，整合停車場、鐵路、軌道交通、公交等等各種來源的數據，將可以為城市提供更為豐富的交通應用，讓道路暢通，停車位不再難找，提升城市整體運營效率。
