大數(shù)據(jù)：規(guī)劃、實施、運維

定　價：￥98.00

作　者：	謝朝陽
出版社：	電子工業(yè)出版社
叢編項：
標(biāo)　簽：	暫缺

購買這本書可以去

ISBN：	9787121339523	出版時間：	2018-05-01	包裝：
開本：	16開	頁數(shù)：	552	字數(shù)：

內(nèi)容簡介

　　你是不是有這樣的困惑：“讀了不少關(guān)于大數(shù)據(jù)的書，發(fā)現(xiàn)這大數(shù)據(jù)既可以用于競選美國總統(tǒng)，又能夠預(yù)測禽流感，還能賣啤酒和尿不濕，又是圍棋高手……大數(shù)據(jù)好像什么都能干耶！可是咋整呀？大數(shù)據(jù)多大為大呀？大數(shù)據(jù)能賺錢不？……唉，怎么還是一頭霧水?！北緯鴮槟愦鹨山饣?。本書將展現(xiàn)作者在國內(nèi)外大數(shù)據(jù)第一線的實戰(zhàn)經(jīng)驗，面向不同行業(yè)的共性訴求來指導(dǎo)讀者大數(shù)據(jù)該怎么做，并闡明大數(shù)據(jù)發(fā)展的誤區(qū)。本書對大數(shù)據(jù)，從經(jīng)濟價值、商業(yè)模式、框架搭建、數(shù)據(jù)挖掘、網(wǎng)絡(luò)布置、安全防護、人員能力和后續(xù)運維管理多個維度，以及基礎(chǔ)設(shè)施、中間件、重點應(yīng)用等多個層面進行系統(tǒng)闡述。幫助決策者將大數(shù)據(jù)概念落地，建立起理性的預(yù)期、合理的規(guī)劃，并最終收獲滿意的經(jīng)濟效益。企業(yè)正面臨從傳統(tǒng)IT轉(zhuǎn)入大數(shù)據(jù)環(huán)境這一不可避免的范式變化，恰好為我國追趕發(fā)達國家信息化建設(shè)帶來了契機。本書以企業(yè)共同關(guān)注的客戶關(guān)系管理（CRM）為實例談大數(shù)據(jù)落地，利用大數(shù)據(jù)采集、分析、決策以達到客戶維系拓展、精準(zhǔn)營銷和創(chuàng)新產(chǎn)品的目的，提出一整套從規(guī)劃到實施再到后續(xù)運維的技術(shù)路線和策略。并用一個已上線的實例將各部分內(nèi)容串起來綜合展示，以解決大數(shù)據(jù)熱潮中的“老虎吃天，無處下爪”的窘境。這對于大數(shù)據(jù)的正確理解，企業(yè)信息系統(tǒng)的建立，以及相應(yīng)的商業(yè)模式改變都具有實際指導(dǎo)意義。

作者簡介

　　謝朝陽，美國弗吉尼亞理工學(xué)院暨州立大學(xué)博士，***“千人計劃”特聘專家。于美國硅谷工作20余載，歷任Sun、Intel、Sony等公司研發(fā)和技術(shù)管理高級職務(wù)，履歷涵蓋了信息技術(shù)領(lǐng)域內(nèi)的產(chǎn)品研發(fā)、工程實踐、市場推廣等多個環(huán)節(jié)。曾任中國數(shù)據(jù)中心聯(lián)盟云計算專家委員會主任委員，運營專家委員會主任委員，大數(shù)據(jù)專家委員會副主任委員，領(lǐng)導(dǎo)組建了中國電信云計算公司并擔(dān)任首任總經(jīng)理?，F(xiàn)任中國電子科技集團大數(shù)據(jù)首席專家，上海華東電腦CTO及上海華訊網(wǎng)絡(luò)系統(tǒng)有限公司董事、高級副總裁，兼任國家數(shù)字化學(xué)習(xí)工程實驗室特聘教授。著有本書的姊妹篇《云計算：規(guī)劃、實施、運維》。

圖書目錄

第1篇大數(shù)據(jù)導(dǎo)論\t1
第1章初識大數(shù)據(jù)\t5
1．1 大數(shù)據(jù)概念談\t7
1．1．1 大數(shù)據(jù)的定義\t7
1．1．2 大數(shù)據(jù)發(fā)展現(xiàn)狀\t10
1．1．3 大數(shù)據(jù)建設(shè)需求分析\t10
1．1．4 大數(shù)據(jù)建設(shè)目標(biāo)\t11
1．1．5 機器學(xué)習(xí)與人工智能\t11
1．2 大數(shù)據(jù)的科學(xué)性\t12
1．3 客戶關(guān)系管理\t18
1．4 大數(shù)據(jù)的理解誤區(qū)\t21
1．5 小結(jié)\t29
第2章大數(shù)據(jù)產(chǎn)業(yè)鏈初探\t30
2．1 現(xiàn)金流與產(chǎn)業(yè)模式\t31
2．2 國外IT企業(yè)\t33
2．3 國內(nèi)IT企業(yè)\t35
2．4 開源軟件\t36
2．5 小微企業(yè)\t39
2．6 政策制定者\t41
2．7 小結(jié)\t43
第2篇規(guī)劃篇\t44
第3章大數(shù)據(jù)體系規(guī)劃\t47
3．1 大數(shù)據(jù)技術(shù)體系\t48
3．1．1 大數(shù)據(jù)采集與預(yù)處理\t49
3．1．2 大數(shù)據(jù)存儲\t52
3．1．3 大數(shù)據(jù)計算\t56
3．1．4 大數(shù)據(jù)分析\t58
3．1．5 大數(shù)據(jù)治理\t64
3．1．6 大數(shù)據(jù)安全保障\t68
3．1．7 大數(shù)據(jù)應(yīng)用支撐\t73
3．2 大數(shù)據(jù)共性技術(shù)重點課題\t76
3．2．1 開放域數(shù)據(jù)采集與共享\t76
3．2．2 多源異構(gòu)數(shù)據(jù)分析技術(shù)\t78
3．2．3 異構(gòu)計算模式集成技術(shù)\t82
3．2．4 數(shù)據(jù)安全與隱私保護\t86
3．3 大數(shù)據(jù)風(fēng)險管控\t90
3．3．1 企業(yè)大數(shù)據(jù)建設(shè)風(fēng)險分析\t90
3．3．2 大數(shù)據(jù)安全標(biāo)準(zhǔn)體系框架\t90
3．3．3 大數(shù)據(jù)安全標(biāo)準(zhǔn)規(guī)劃\t91
3．4 小結(jié)\t94
第4章大數(shù)據(jù)技術(shù)要求\t95
4．1 大數(shù)據(jù)總體架構(gòu)\t98
4．1．1 背景概述\t98
4．1．2 現(xiàn)狀分析\t98
4．1．3 總體目標(biāo)\t99
4．1．4 技術(shù)架構(gòu)\t100
4．1．5 實施指引\t102
4．2 采集要求\t104
4．2．1 功能架構(gòu)\t104
4．2．2 技術(shù)架構(gòu)\t105
4．2．3 處理技術(shù)\t106
4．2．4 場景應(yīng)用\t111
4．2．5 接口協(xié)議\t113
4．2．6 接口約定\t113
4．2．7 性能指標(biāo)\t116
4．3 基礎(chǔ)能力要求\t117
4．3．1 總體概述\t117
4．3．2 基礎(chǔ)框架\t119
4．3．3 能力開放\t135
4．3．4 性能指標(biāo)\t141
4．4 核心處理能力要求\t142
4．4．1 總體概述\t142
4．4．2 數(shù)據(jù)模型\t149
4．4．3 數(shù)據(jù)處理\t152
4．4．4 數(shù)據(jù)質(zhì)量\t155
4．4．5 系統(tǒng)性能\t158
4．5 需求與項目管理\t160
4．6 小結(jié)\t161
第3篇實施篇\t163
第5章大數(shù)據(jù)并行計算框架\t166
5．1 并行計算技術(shù)\t167
5．1．1 基本命題\t167
5．1．2 設(shè)計模式分類\t170
5．1．3 關(guān)鍵技術(shù)點\t173
5．2 MapReduce計算技術(shù)\t177
5．2．1 處理模型設(shè)計原則\t177
5．2．2 主要功能與技術(shù)設(shè)計\t178
5．3 Hadoop MapReduce設(shè)計與工作模式\t181
5．3．1 程序執(zhí)行模式\t181
5．3．2 作業(yè)調(diào)度模式\t183
5．3．3 執(zhí)行框架及流程設(shè)計\t186
5．4 Hadoop MapReduce組件接口\t187
5．4．1 InputFormat\t187
5．4．2 InputSplit\t188
5．4．3 RecordReader\t189
5．4．4 Mapper\t190
5．4．5 Combiner\t192
5．4．6 Partitioner\t193
5．5 小結(jié)\t193
第6章大數(shù)據(jù)分布式處理系統(tǒng)\t194
6．1 Hadoop系統(tǒng)平臺\t195
6．1．1 分布式結(jié)構(gòu)設(shè)計\t195
6．1．2 Hadoop生態(tài)系統(tǒng)\t196
6．2 HDFS分布式文件系統(tǒng)\t200
6．2．1 系統(tǒng)架構(gòu)\t200
6．2．2 可靠性設(shè)計\t203
6．2．3 文件存儲組織\t205
6．2．4 數(shù)據(jù)讀寫過程\t207
6．2．5 文件系統(tǒng)操作\t209
6．3 HBase分布式數(shù)據(jù)庫\t211
6．3．1 技術(shù)特點\t211
6．3．2 系統(tǒng)結(jié)構(gòu)設(shè)計\t212
6．3．3 數(shù)據(jù)存儲模型\t213
6．3．4 查詢模式\t215
6．3．5 數(shù)據(jù)表設(shè)計\t217
6．3．6 RegionServer配置\t218
6．4 小結(jié)\t222
第7章大數(shù)據(jù)存儲\t223
7．1 磁盤陣列技術(shù)\t224
7．2 數(shù)據(jù)存儲接口\t225
7．2．1 對象存儲\t225
7．2．2 裸設(shè)備存儲\t226
7．2．3 塊存儲\t227
7．3 存儲集群架構(gòu)\t228
7．3．1 共享與非共享型\t228
7．3．2 對稱與非對稱式\t229
7．3．3 自助式與服務(wù)式\t230
7．3．4 SPI與SFI\t231
7．3．5 串行方式與并行方式\t232
7．4 數(shù)據(jù)存儲技術(shù)本質(zhì)\t233
7．4．1 三網(wǎng)統(tǒng)一理論\t234
7．4．2 并行概念理解\t236
7．4．3 集群分層架構(gòu)\t238
7．5 數(shù)據(jù)分級存儲探討\t238
7．5．1 超融合\t238
7．5．2 冷數(shù)據(jù)\t239
7．5．3 平臺架構(gòu)\t241
7．5．4 應(yīng)用場景\t248
7．6 小結(jié)\t249
第8章機器學(xué)習(xí)與人工智能\t250
8．1 數(shù)據(jù)挖掘\t251
8．1．1 數(shù)據(jù)分類采集\t253
8．1．2 模式類型設(shè)計\t258
8．1．3 模式價值分析\t261
8．1．4 系統(tǒng)關(guān)鍵技術(shù)\t262
8．2 機器學(xué)習(xí)\t264
8．2．1 算法分類\t265
8．2．2 合適算法選擇\t265
8．2．3 程序開發(fā)設(shè)計\t266
8．3 人工智能\t267
8．3．1 模式定義\t268
8．3．2 人工智能舉例\t269
8．4 小結(jié)\t276
第4篇運維篇\t277
第9章大數(shù)據(jù)集群網(wǎng)絡(luò)架構(gòu)\t280
9．1 現(xiàn)有數(shù)據(jù)中心網(wǎng)絡(luò)架構(gòu)\t281
9．1．1 架構(gòu)分析\t281
9．1．2 存在弊端\t281
9．2 大數(shù)據(jù)網(wǎng)絡(luò)設(shè)計要點\t283
9．2．1 大數(shù)據(jù)業(yè)務(wù)分析\t283
9．2．2 大數(shù)據(jù)網(wǎng)絡(luò)流量模型\t284
9．2．3 大數(shù)據(jù)網(wǎng)絡(luò)新需求\t286
9．3 新興網(wǎng)絡(luò)技術(shù)\t287
9．3．1 SDN\t287
9．3．2 NFV\t291
9．3．3 VXLAN\t292
9．3．4 InfiniBand\t295
9．4 小結(jié)\t297
第10章大數(shù)據(jù)安全\t298
10．1 大數(shù)據(jù)安全挑戰(zhàn)\t299
10．2 基礎(chǔ)設(shè)施安全\t300
10．2．1 存在威脅\t300
10．2．2 虛擬化安全\t301
10．3 數(shù)據(jù)安全\t302
10．3．1 數(shù)據(jù)采集安全技術(shù)\t302
10．3．2 數(shù)據(jù)存儲安全技術(shù)\t303
10．3．3 數(shù)據(jù)挖掘安全技術(shù)\t307
10．3．4 數(shù)據(jù)發(fā)布安全技術(shù)\t309
10．4 大數(shù)據(jù)平臺Hadoop安全\t311
10．4．1 Hadoop安全問題概述\t311
10．4．2 Kerberos概述\t313
10．4．3 Kerberos認證過程\t313
10．4．4 Hadoop安全機制\t314
10．4．5 Kerberos的優(yōu)缺點\t316
10．5 小結(jié)\t317
第11章大數(shù)據(jù)備份與恢復(fù)\t318
11．1 數(shù)據(jù)備份與恢復(fù)\t319
11．1．1 數(shù)據(jù)備份\t319
11．1．2 數(shù)據(jù)恢復(fù)\t323
11．2 分布式存儲系統(tǒng)備份與恢復(fù)\t324
11．2．1 概述\t324
11．2．2 HDFS數(shù)據(jù)備份策略\t328
11．3 小結(jié)\t330
第12章大數(shù)據(jù)環(huán)境的監(jiān)管\t331
12．1 概述\t332
12．2 大數(shù)據(jù)集群配置管理\t333
12．3 大數(shù)據(jù)集群監(jiān)控\t337
12．3．1 大數(shù)據(jù)監(jiān)控特點\t337
12．3．2 監(jiān)控系統(tǒng)\t338
12．3．3 監(jiān)控系統(tǒng)建立途徑\t341
12．3．4 商業(yè)監(jiān)控軟件\t342
12．3．5 開源監(jiān)控軟件\t343
12．3．6 傳統(tǒng)網(wǎng)絡(luò)管理軟件：NetEagle\t352
12．3．7 統(tǒng)一管理平臺：UMP\t354
12．4 大數(shù)據(jù)日志分析\t356
12．5 小結(jié)\t359
第13章大數(shù)據(jù)的運維方法\t361
13．1 運維服務(wù)\t362
13．2 運維流程模型\t363
13．2．1 故障排查\t363
13．2．2 緊急事故管理\t366
13．2．3 處理連鎖故障\t368
13．3 運維人員\t371
13．3．1 需要具備的能力\t371
13．3．2 任務(wù)內(nèi)容\t372
13．4 自動化運維\t374
13．4．1 自動化運維價值\t374
13．4．2 自動化運維工具\t376
13．5 小結(jié)\t379
第5篇實例篇\t380
第14章 Oracle MoviePlex 大數(shù)據(jù)規(guī)劃\t383
14．1 案例概述\t384
14．1．1 案例背景\t386
14．1．2 架構(gòu)規(guī)劃\t387
14．2 大數(shù)據(jù)組件介紹\t395
14．2．1 Cloudera的CDH\t396
14．2．2 Cloudera管理器\t397
14．2．3 Oracle大數(shù)據(jù)連接器\t398
14．2．4 Oracle大數(shù)據(jù)加載器\t398
14．2．5 Oracle大數(shù)據(jù)整合器\t400
14．2．6 Oracle R語言連接器\t400
14．2．7 Oracle NoSQL數(shù)據(jù)庫\t401
14．3 小結(jié)\t402
第15章 Oracle MoviePlex大數(shù)據(jù)實施\t404
15．1 環(huán)境準(zhǔn)備\t405
15．1．1 MoviePlex環(huán)境部署\t405
15．1．2 MoviePlex環(huán)境初始化\t409
15．2 案例演示\t413
15．2．1 配置Oracle Big Data SQL\t413
15．2．2 建立存放在HDFS日志表\t414
15．2．3 HIVE訪問HDFS和NoSQL\t416
15．2．4 Oracle Big Data SQL新功能\t418
15．2．5 Oracle Big Data安全策略\t420
15．2．6 Oracle分析SQL\t422
15．2．7 Oracle SQL模式匹配\t423
15．2．8 創(chuàng)建匯總數(shù)據(jù)集\t425
15．2．9 Oracle 12c SQL解析特點\t426
15．3 推薦系統(tǒng)\t428
15．3．1 百萬美元大獎賽\t428
15．3．2 技術(shù)細節(jié)\t429
15．4 小結(jié)\t433
第16章 Oracle MoviePlex大數(shù)據(jù)運維\t434
16．1 集群\t436
16．1．1 Hadoop\t436
16．1．2 ZooKeeper\t439
16．2 文件系統(tǒng)和非關(guān)系數(shù)據(jù)庫\t442
16．2．1 HDFS\t443
16．2．2 HBase\t444
16．2．3 NoSQL\t446
16．2．4 Kafka\t449
16．3 中間件\t451
16．3．1 WebLogic\t451
16．3．2 HUE\t454
16．3．3 Solr\t456
16．4 數(shù)據(jù)轉(zhuǎn)換\t458
16．4．1 Hive\t458
16．4．2 Impala\t460
16．4．3 Sqoop2\t462
16．5 資源整合調(diào)度\t463
16．5．1 Oozie\t463
16．5．2 YARN\t464
16．6 小結(jié)\t467
第6篇明天的大數(shù)據(jù)\t468
第17章大數(shù)據(jù)面臨的挑戰(zhàn)\t470
17．1 可靠性挑戰(zhàn)\t472
17．2 可擴展性挑戰(zhàn)\t473
17．3 系統(tǒng)安全挑戰(zhàn)\t473
17．4 節(jié)能降耗\t475
17．5 算法挑戰(zhàn)\t477
17．6 測不準(zhǔn)原理\t477
17．7 小結(jié)\t478
第18章大數(shù)據(jù)應(yīng)用\t479
18．1 客戶關(guān)系與供求管理\t480
18．2 科學(xué)研究\t483
18．3 教育大數(shù)據(jù)應(yīng)用\t485
18．4 區(qū)塊鏈與加密貨幣\t490
18．5 小結(jié)\t493
結(jié)束語\t494
附錄A 安裝Cloudera Apache Hadoop\t502
A．1 環(huán)境準(zhǔn)備\t504
A．1．1 Cloudera Manager架構(gòu)\t504
A．1．2 服務(wù)器環(huán)境準(zhǔn)備\t504
A．1．3 安裝介質(zhì)下載\t505
A．1．4 本地yum源搭建\t505
A．2 安裝Cloudera Manager Server\t506
A．3 部署Hadoop集群\t507
A．4 安裝結(jié)果\t508
附錄B 在Matlab中應(yīng)用 MapReduce\t509
B．1 datastore簡介\t510
B．2 搜尋需要的項\t511
B．3 MapReduce簡介\t512
B．4 如何運用MapReduce進行運算\t512
B．5 MapReduce中對于鍵的使用\t514
B．6 使用mapreduce計算分組指標(biāo)\t514
B．7 輸出結(jié)果可視化\t516
附錄C 從AlphaGo到 AlphaZero\t518
參考文獻\t526