大數據是一種從各種類型的數據中快速獲得有價值信息的技術。大數據領域已經涌現出了大量新的技術，它們成為大數據采集、存儲、處理和呈現的有力武器。大數據處理關鍵技術一般包括大數據采集技術、大數據預處理技術、大數據存儲及管理技術、大數據分析及挖掘技術、大數據展現與應用技術（大數據檢索、大數據可視化、大數據應用、大數據安全等）。

1．大數據采集技術

大數據采集是指通過RFID數據、傳感器數據、社交網絡交互數據及移動互聯網數據等方式獲得的各種類型的結構化、半結構化（或稱之為弱結構化）及非結構化的海量數據，是大數據知識服務模型的根本。重點要突破分布式高速、高可靠數據爬取或采集高速數據全映像等大數據收集技術；突破高速數據解析、轉換與裝載等大數據整合技術：設計質量評估模型，開發(fā)數據質量提高技術。

大數據采集一般分為大數據智能感知層和基礎支撐層。大數據智能感知層主要包括數據傳感體系、網絡通信體系、傳感適配體系、智能識別體系及軟硬件資源接人系統(tǒng)，對構、半結構化、非結構化的海量數據的智能化識別、定位、跟蹤、接入、構化、半結構化及非結構化數據的數據庫及物聯網絡資源等基礎支撐環(huán)境。重點攻克分數據的網絡傳輸與壓縮技術，大數據隱私保護技術等。