章大數據到底是什麼

大數據的“前世今生”  / 

大數據的四個來源  / 

大數據的四個特征  / 

數據海洋中的商業 / 

從數據到大數據 / 

正在異化的核心競爭力 / 

“大數據”不等於“數據大” / 

大數據與傳統數據的區別 / 

結構化、 非結構化和半結構化的數據 / 

第二章大數據和我們的關繫

我們為什麼要大數據  / 

大數據時代已經來臨 / 

得數據者得天下 / 

大數據記錄了一切 / 

大數據改變工作與生活 / 

大數據和你有什麼關繫 / 

第三章大數據引導大創業

交通司法： 領銜大數據運用 / 

金融領域： 中科金財等7隻股票受關注 / 

物流領域： 中儲股份等龍頭股親密接觸大數據 / 

項目數據分析師事務所： 致力於數據分析 / 

第四章大數據面臨的難題

大數據分析工具面臨的難題 / 

國內大數據面臨的問題 / 

大數據面臨的重要技術問題 / 

大數據時代的網絡安全 / 

大數據專業人纔的缺乏  / 

大數據思維尚未形成  / 

大數據分析的局限 / 

第五章大數據創造大價值 

大數據的核心就是預測 / 

一切皆可數據化 / 

數據是一種資產  / 

化“數”為“據”是關鍵 / 

創造巨大的潛在價值 / 

大數據與商業價值的轉化 / 

第六章大數據促進大變革

大數據變革人性思維 / 

大數據改變商業規則 / 

大數據驅動商業模式創新 / 

大數據引領金融業變革 / 

大數據顛覆傳統媒體行業  / 

大數據衝擊金融行業  / 

大數據決定企業競爭力  / 

大數據的決策模式  / 

大數據實現可視化 / 

大數據讓教育更智能  / 

第七章大數據演繹大未來 

大數據時代的發展趨勢 / 

大數據統治世界  / 

大數據壟斷的困境與隱憂  / 

大數據引領數據智能時代  / 

大數據驅動新的工業革命  / 

第八章大數據驅動大營銷

大數據整合數據庫營銷  / 

大數據使得營銷更精確  / 

大數據中的商業價值 / 

大數據背後蘊藏的價值 / 

大數據時代定位客戶 / 

大數據讓廣告智能化 / 

大數據下的品牌代言 / 

大數據的預測性銷售分析 / 

大數據改變過往產品經驗 / 

第九章大數據帶來大應用

大數據政府的應用 / 

大數據的行業應用 / 

大數據的個人應用 / 

當前，大數據正以一種革命風暴的姿態引發全球關注。阿裡巴巴馬雲指出，“互聯網 ”已從IT時代到DT（數字科技）時代，而DT是一個數據更充分流動的時代。而且未來大數據會作為一種資產存在，並將誕生一個萬億級別的交易市場。

有人將大數據比作“原油”，其實大數據挖掘纔是大數據的核心。據公開數據顯示，2013 年中國產生的數據總量超過0.8 ZB，相當於裝滿8億個容量為1 TB的移動硬盤。如果不具備挖掘能力，如此海量的數據隻能處於休眠狀態。大數據通過數據挖掘技術，將海量數據進行歸納、建模、分析，找到數據中的關聯關繫，從而得出事情發生的可能性。打個比方，大數據會告訴商家客戶喜歡什麼，甚至可以精確到每一位客戶的喜好。同時，大數據挖掘還需要眾多高性能計算機同時承擔數據存儲、數據處理、數據挖掘的工作，這便是雲計算。大數據挖掘必須依托雲計算的分布式處理、分布式數據庫和雲存儲、虛擬化技術，纔可以快速實現。

有這樣一個故事。

    2003年，奧倫·埃齊奧尼準備乘坐從西雅圖到洛杉磯的飛機去參加弟弟的婚禮。他知道飛機票越早預訂越便宜，於是他在這個大喜日子來臨之前的幾個月，就在網上預訂了一張去洛杉磯的機票。在飛機上，埃齊奧尼好奇地問鄰座的乘客花了多少錢購買機票。當得知雖然那個人的機票比他買得更晚，但是票價卻比他便宜得多時，他感到非常氣憤。於是，他又詢問了另外幾個乘客，結果發現大家買的票居然都比他的便宜。

對大多數人來說，這種被敲竹杠的感覺也許會隨著他們走下飛機而消失。然而，埃齊奧尼是美國有名的計算機專家之一，從他擔任華盛頓大學人工智能項目的負責人開始，他創立了許多在今天看來非常典型的大數據公司，而那時候還沒有人提出“大數據”這個概念。

飛機著陸之後，埃齊奧尼下定決心要幫助人們開發一個繫統，用來推測當前網頁上的機票價格是否合理。作為一種商品，同一架飛機上每個座位的價格本來不應該有差別。但實際上，價格卻千差萬別，其中緣由隻有航空公司自己清楚。

埃齊奧尼表示，他不需要去解開機票價格差異的奧秘，他要做的僅僅是預測當前的機票價格在未來一段時間內會上漲還是下降。於是，埃齊奧尼開始著手啟動這個項目。

埃齊奧尼創立了一個預測繫統，它幫助虛擬的乘客了很多錢。這個預測繫統建立在41天內價格波動產生的12000個價格樣本基礎之上，而這些信息都是從一個旅遊網站上搜集來的。這個預測繫統並不能說明原因，隻能推測會發生什麼。也就是說，它不知道是哪些因素導致了機票價格的波動。機票降價是因為很多沒賣掉的座位、季節性原因，還是所謂的周六晚上不出門，它都不知道。這個繫統隻知道利用其他航班的數據來預測未來機票價格的走勢。“買還是不買，這是一個問題。”埃齊奧尼沉思著。他給這個研究項目取了一個非常貼切的名字，叫“哈姆雷特”。

這個繫統為了保障自身的透明度，會把對機票價格走勢預測的可信度標示出來，供消費者參考。繫統的運轉需要海量數據的支持。為了提高預測的準確性，埃齊奧尼找到了一個行業機票預訂數據庫。有了這個數據庫，繫統進行預測時，預測的結果就可以基於美國商業航空產業中，每一條航線上每一架飛機內的每一個座位一年內的綜合票價記錄而得出。這就是大數據的魅力。

本書首先介紹了大數據時代的特征，可以幫助你對大數據及其價值有一個概括性的了解和認識。其次，你將知道如何培養、挖掘、處理數據，使數據為自己創造更大價值。後，介紹了大數據在企業決策、運營管理、金融投資等方面的實際應用。內容簡單實用，特別適合初級讀者閱讀。

大數據的“前世今生” 

    “大數據”是什麼？要回答這個問題首先要看看數據是怎樣產生的。

    在信息化時代裡，我們每個人都在貢獻數據。上網、打電話、發短信、聽歌、拍照片、發帖子、看視頻，都會產生數據，就像涓涓細流彙聚成江河湖海,“大數據”出現了。

    近年來，數據大爆炸的速度快得驚人。馬雲曾感慨地說：“大家還沒搞清PC的時候，移動互聯網來了，還沒搞清移動互聯網的時候，大數據時代來了。”

    大數據時代來得太快，以至於人們對大數據的定義都有N多種。

    按照美國國家標準與技術研究院發布的研究報告的定義：“大數據是用來描述在我們網絡的、數字的、遍布傳感器的、信息驅動的世界中呈現出數據泛濫的常用詞語。大量數據資源為解決以前不可能解決的問題帶來了可能性。”

    按照業界權威高德納咨詢公司的定義：“大數據是需要新處理模式纔能具有更強的決策力、洞察發現力和流程優化能力的海量、高增長率和多樣化的信息資產。”

    根據百度百科詞條的定義：“大數據，或稱巨量資料，指的是所涉及的資料量規模巨大到無法通過目前主流軟件工具，在合理時間內達到擷取、管理、處理並整理成為幫助企業經營決策更積極目的的資訊。”

    “大數據”到底有多大？目前通行說法，“大數據”至少要達到PB量級。其中，1 PB=22.3萬張DVD光盤的容量，相當於800個人類大腦記憶總量，或90個人身體細胞數目總和。1 PB的MP3歌曲可以連續播放2000年。

    美國互聯網數據中心指出，互聯網上的數據每年將增長50%，每兩年便將翻一番，而目前世界上90%以上的數據是近幾年纔產生的。全世界的工業設備、汽車、電表等設備上有著無數的數碼傳感器，隨時測量和傳遞著有關位置、運動、震動、溫度、濕度乃至空氣中化學物質的變化，也產生著海量的數據信息。

    早在1980年，著名未來學家阿爾文·托夫勒便在《第三次浪潮》一書中，將大數據贊頌為“第三次浪潮的華彩樂章”。不過，大約從2009年開始，“163大數據”纔成為互聯網信息技術行業的流行詞彙。

    如今，大數據技術可以幫助人們做很多以前做不到的事情。比如，國外某警察局利用大數據預測犯罪的發生幾率，可以精確到街區500平方英尺的範圍內，有針對性地預防，從而使該地區犯罪率明顯下降；某統計學家利用大數據預測總統選舉結果；某大學利用手機定位數據和交通數據建立城市規劃等。

    大數據時代，海量的數據已經成為一種“礦藏”。據測算，三年前，2011年全球大數據產值512017年全球大數據產值將達到534

“書同文，車同軌。”任何新興產業要健康發展，首先要盡快建立大家共同遵守的標準。目前國內外大數據標準化工作已經起步。全國信標委已經對標準化工作進行梳理，從基礎、技術、產品、應用等不同角度進行分析，形成了大數據標準體繫框架，並發布了《大數據標準化白皮書》。

大數據的四個來源 

當今世界，大數據無處不在，它影響到了我們的工作、生活和學習，並將繼續施加更大的影響。

    大數據用於描述這樣的數據組，其規模超出了日常軟件在可容忍期限內獲取、管理和加工數據的能力。一些網絡技術領先的公司持續地投資於昂貴的大數據技術，成效顯著。大數據使得創新型公司變成了經營新方法的率先接受者，經營更為成功。通過大數據的分析挖掘，公司可以發現新的經營模式，對工藝加以改進。例如，在獲悉消費者行為後，可以將發現用於某些改變，如降低成本或增加銷售，就會產生價值。在任意大的數據組中應用統計方法可以發現有用信息，將這些信息商業化即可獲益。

    大數據時代一切在變，應對之策是改變一切。經營方式發生了變化——制定決策變得與開展行動深度融合；運用信息的方式發生了變化——從處在經營的邊緣變成了處於所有方面的中心；技術發生了變化——從批處理到實時處理，從分割到融為一體；人們工作的方式發生了變化——從在命令和控制模式下運作到在合作環境下負責自己的信息和交互應用。

根據麥肯錫全球研究所的分析，利用大數據在各行各業能產生顯著的財務價值。美國健康護理利用大數據每年產出3000 0.7%；歐洲公共管理每年價值2500 0.5%；全球個人定位數據服務提供商收益1000 ，為終端用戶提供高達7000 6%，年勞動生產率提高0.5%～1%；制造業可50%的產品開發和裝配成本，營運資本下降7%。

當今大數據的來源除了專業研究機構產生大量的數據外（歐州核子研究組織（CERN） 的離子對撞機每秒運行產生的數據高達40 TB），與企業經營相關的大數據可以劃分為四個來源：

    1.越來越多的機器配備了連續測量和報告運行情況的裝置。幾年前，跟蹤遙測發動機運行僅限於價值數的航天飛機。現在，汽車生產商在車輛中配置了監視器，連續提供車輛機械繫統整體運行情況。一旦數據可得，公司將千方百計從中漁利。這些機器傳感數據屬於大數據的範圍。

    2.計算機產生的數據可能包含著關於因特網和其他使用者行動和行為的有趣信息，從而提供了對他們的願望和需求潛在的有用認識。

    3.使用者自身產生的數據、信息，人們通過電郵、短信、微博等產生的文本信息。

    4.至今的數據是音頻、視頻和符號數據。這些數據結構松散，數量巨大，很難從中挖掘有意義的結論和有用的信息。

大型以Internet 為核心的公司，如Amazon, Google, eBay, Twitter 和Facebook 正使用後三類海量信息認識消費行為，預測特定需求和整體趨勢。類數據可能產生較少的業務，但可以推動某些經營模式實質變革。例如，汽車傳感數據用於評價司機行為會推動汽車保險業的深刻變革。

    大數據改變了所有行業全部公司的經營方式。從對市場的理解到如何挖掘經營信息，大數據能洞察每項轉變。一個致力於收集和分析大數據的行業業已形成，對現有公司產生了深刻影響。據有關調查，有10%的公司認為在過去的五年中，大數據徹底改變了它們的經營方式；46%的公司認同大數據是其決策的一項重要支持因素。