本書對大數據的基本理論進行了詳細介紹, 分析了大數據的數據資源、數據質量和大數據生命周期的含義, 闡述了科學數據與資源共享以及大數據在交通、能源、教育和公共安全等各領域的應用, 解釋了大數據的治理框架及服務方向, 進一步論述了大數據的儲存、管理和處理, 以及人工智能的操作, 本書闡述了大數據與人工智能的未來, 讓讀者了解人工智能的一個重要應用方向--智能人工系統(tǒng)。
近年來,大數據的浪潮奔涌到世界上的每個角落。在大數據的驅動下,人類社會在加速發(fā)展。大數據已經成為企業(yè)界、科技界和政府等關注的熱點。大數據涉及的范圍非常廣泛。它也將持續(xù)地影響人們生活的各個方面。
人們已經不再糾結大數據的概念——大數據已經開始在各個領域得到應用,數據產品誕生,為使衣食住行更為便捷而努力,支撐商業(yè)社會的運轉,或者維系著某種龐大體系的安全;還在單純講著大數據故事和滿足于展望未來的人越來越少——有些故事被證明只是故事,而一些三四年前被認為尚且遙遠的想象,正在逐步成為現(xiàn)實。無論給這個時代賦予怎樣的標簽——“互聯(lián)網”“移動互聯(lián)網”“人工智能”,我們都將發(fā)現(xiàn),大數據在其中確實具有廣泛的基礎性和關鍵性價值。畢竟在這紛繁復雜、高速運轉、迭代進化的信息世界中,數據——無論是數值型或是文本型,結構化或是非結構化的——都是信息的最佳留存載體,也是我們用于解釋過去和預測未來唯一有價值的資料。過去因存儲條件的限制,只有一部分信息被留存下來,即使如此,面對這些保存下來的信息資料,我們尚感到力不從心;如今我們已身處大數據洪流,人類社會面臨的中心問題,的確已從提高勞動生產率,轉變?yōu)槿绾胃玫乩眯畔椭覀冏龀鲎罴褯Q策。
由于互聯(lián)網和信息技術的快速發(fā)展,大數據日益受到人們的關注,已經引發(fā)自互聯(lián)網、云計算之后IT產業(yè)的新的技術革命。面對信息的激流,多元化數據的涌現(xiàn),大數據已經為個人生活、企業(yè)經營,甚至國家與社會的發(fā)展都帶來了機遇和挑戰(zhàn),成為IT產業(yè)中最具潛力的藍海。人們用大數據來描述和定義信息爆炸時代產生的海量數據,并命名與之相關的技術發(fā)展與創(chuàng)新。企業(yè)內部的經營信息、互聯(lián)網世界中的商品物流信息,以及互聯(lián)網世界中的人與人交互信息、位置信息等,其數量將遠遠超越現(xiàn)有企業(yè)IT架構和基礎設施的承載能力,實時性要求也將大大超越現(xiàn)有的計算能力。然而如何盤活這些數據資產,使其為國家治理、企業(yè)決策乃至個人生活服務,是大數據的核心議題。
本書首先對大數據的基本概念做了簡單的介紹,以便讀者在閱讀本書時,能夠對大數據有個淺顯的認識,也能對本書內容有更深入的理解;其次本書研究了大數據的生命周期以及大數據安全問題的管理,通過這兩方面的研究對大數據的具體形式和當前的現(xiàn)狀等問題都能夠有深入的了解;最后以大數據應用的基本策略以及大數據應用模式和價值引出當前大數據在城市交通、金融、能源、教育等領域的應用問題。
由于作者水平有限.本書在內容上難免有不妥甚至謬誤之處,敬請廣大學界同人和讀者朋友指正。
第一章 大數據概述
第一節(jié) 數據洪流
第二節(jié) 大數據的基本概念
第三節(jié) 大數據的生態(tài)環(huán)境
第四節(jié) 大數據的性質
第五節(jié) 大數據技術
第六節(jié) 大數據基本分析
第二章 大數據的生命周期
第一節(jié) 大數據生命周期概述
第二節(jié) 大數據的采集
第三節(jié) 大數據的存儲
第四節(jié) 大數據的整合
第五節(jié) 大數據的呈現(xiàn)與使用
第六節(jié) 大數據分析與應用
第七節(jié) 大數據歸檔與銷毀
第三章 大數據安全問題管理
第一節(jié) 大數據安全和隱私問題
第二節(jié) 大數據安全防護
第三節(jié) 大數據隱私保護
第四節(jié) 大數據合規(guī)管理
第四章 大數據應用的基本策略
第一節(jié) 大數據的商業(yè)應用架構
第二節(jié) 大數據應用的前期準備
第三節(jié) 大數據分析的基本過程
第四節(jié) 數據倉庫的協(xié)同運用
第五節(jié) 大數據戰(zhàn)略與運營創(chuàng)新
第五章 大數據應用模式和價值
第一節(jié) 大數據應用的一般模式
第二節(jié) 大數據應用的業(yè)務價值
第三節(jié) 大數據應用的共性需求
第六章 交通數據資源
第一節(jié) 大數據時代下的城市交通
第二節(jié) 城市交通及相關領域數據資源
第三節(jié) 城市交通大數據的組織、描繪及技術
第四節(jié) 城市交通大數據的應用開發(fā)與服務
第七章 金融大數據應用
第一節(jié) 大數據與資產管理
第二節(jié) 大數據與量化投資
第三節(jié) 基于數據挖掘的自動化交易
第八章 能源大數據
第一節(jié) 能源大數據概述
第二節(jié) 能源大數據的分析與處理
第三節(jié) 能源大數據公共服務平臺建設
第九章 大數據與教育
第一節(jié) 教育大數據的概述
第二節(jié) 教育大數據在教師知識管理的應用
第三節(jié) 遠程教育的大數據研究與應用
第四節(jié) 我國教育與大數據應用
第五節(jié) 大數據環(huán)境下高等教育管理
參考文獻