目錄
第一章  大數據概述 •••1 
第一節  大數據的基本概念 •••3 
第二節  大數據的發展 •••10 
第三節  大數據技術 •••22 
第四節  大數據應用 •••24 
第五節  大數據帶來的影響 •••30 

第二章  大數據與雲計算、物聯網 •••39 
第一節  雲計算 •••41 
第二節  物聯網 •••58 
第三節  大數據與雲計算、物聯網的關繫 •••73

第三章  大數據采集及預處理 •••79 
第一節  大數據采集概述 •••81 
第二節  大數據采集方法 •••88 
第三節  大數據預處理 •••95 
第四節  大數據采集及處理平臺 •••114 

第四章  大數據分析與數據挖掘 •••121 
第一節  大數據分析的基本概念 •••123 
第二節  大數據分析方法 •••127 
第三節  大數據與數據挖掘 •••130 
第四節  數據挖掘的高級分析方法 •••137 
第五節  數據挖掘項目的生命周期 •••145 

第五章  大數據存儲與管理 •••151 
第一節  大數據存儲 •••153 
第二節  分布式文件繫統 •••161 
第三節  數據庫 •••174
第四節  數據倉庫 •••186 
第五節  數據管理 •••193 

第六章  大數據可視化 •••205 
第一節  大數據可視化概述 •••207 
第二節  大數據可視化工具 •••212 
第三節  大數據可視化應用 •••222 
第四節  大數據可視化面臨的挑戰 •••225 

第七章  大數據時代的安全與隱私保護 •••229 
第一節  大數據安全 •••231 
第二節  大數據隱私保護 •••240 
第三節  大數據在安全管理中的應用 •••251 
第四節  數據脫敏技術 •••266 

第八章  大數據在各領域/行業中的應用 •••269 
第一節  大數據在電信行業中的應用 •••271 
第二節  大數據在生物醫學領域中的應用 •••284
第三節  大數據在物流領域中的應用 •••291 
第四節  大數據在體育和娛樂領域中的應用 •••298 
第五節  大數據在安全領域中的應用 •••302 
第六節  大數據在餐飲行業中的應用 •••305 
第七節  大數據在零售行業中的應用 •••309 
第八節  大數據在城市管理中的應用 •••313 

參考文獻 •••319

  前言
  由於互聯網和信息行業的快速發展，大數據日益引起人們的關注，進而引發自互聯網、雲計算之後IT行業的又一大顛覆性的技術革命。面對信息的激化數據的湧現，傳統的數據技術已顯得力不從心，大數據技術應運而生。大數據給個人生活、企業經營，甚至國家與社會的發展帶來了機遇和挑戰，成為IT信息產業中最具潛力的“藍海”。人們用大數據來描述和定義信息時代產生的海量數據，並命名與之相關的技術發展與創新。 
  大數據技術與應用是一門理論性和實踐性都很強的課程，本書的寫作堅持“應用為先”的原則，注重理論與實踐相結合，將大數據抽像的概念、原理和技術方法融入具體的實例中，從而幫助讀者更好地理解、掌握和運用大數據技術。 
  本書共分為八章。第一章是概述部分，簡要介紹大數據的定義、特點、相關技術和應用領域；第二章介紹大數據與雲計算、物聯網三者之間的關繫；第三章介紹大數據采集及預處理，包括大數據采集方法、預處理流程以及常用的大數據采集與處理平臺；第四章介紹大數據分析與數據挖掘的理論和方法；第五章介紹大數據存儲與管理；第六章介紹大數據可視化技術的理論與應用；第七章介紹大數據時代的安全與隱私保護；第八章介紹大數據技術在電信、生物醫學、物流、體育和娛樂、安全、餐飲、零售等行業或領域中的應用。 
  本書由陳明、張凱、張丁文共同完成，具體分工如下：陳明寫作第三章、第四章、第六章和第七章，張凱寫作第一章和第八章，張丁文寫作第二章和第五章。 
  本書在寫作過程中，參考了大量國內外著作、論文及優秀文章，在此謹向相關作者表示衷心的感謝。由於寫作過程中參考的資料較多，書中內容難免有疏漏之處，懇請廣大讀者批評指正。 
  陳明 
  2023年5月