本書分13章，分別從企業(yè)大數(shù)據(jù)戰(zhàn)略定位、企業(yè)大數(shù)據(jù)落地實施和價值評估，以及大數(shù)據(jù)的變革與挑戰(zhàn)這三大方面進行撰寫，宏觀上涵蓋了企業(yè)戰(zhàn)略決策和定位，微觀上涵蓋了大數(shù)據(jù)職能、思路、方法、流程、開發(fā)、應(yīng)用、評估的整個環(huán)節(jié)。企業(yè)大數(shù)據(jù)的知識完整性也是本書的特色之一。
Contents?目 錄
前言
第1章企業(yè)大數(shù)據(jù)戰(zhàn)略定位 1
1.1宏觀 1
1.2微觀 4
1.2.1資源協(xié)同 5
1.2.2戰(zhàn)略定位 6
1.2.3啟動契機 7
1.2.4大數(shù)據(jù)歷程 9
1.3本章小結(jié) 12
第2章企業(yè)大數(shù)據(jù)職能規(guī)劃 13
2.1大數(shù)據(jù)組織架構(gòu)體系 13
2.1.1大數(shù)據(jù)部門在企業(yè)中的角色 13
2.1.2常見的大數(shù)據(jù)職能及職責 17
2.2大數(shù)據(jù)職位構(gòu)建體系 24
2.2.1基礎(chǔ)平臺類 24
2.2.2數(shù)據(jù)管理類 26
2.2.3技術(shù)研發(fā)類 27
2.2.4產(chǎn)品設(shè)計類 30
2.2.5數(shù)據(jù)挖掘類 32
2.2.6數(shù)據(jù)分析類 33
2.3大數(shù)據(jù)制度和流程規(guī)范 35
2.3.1制度和流程規(guī)范意義 35
2.3.2制度和流程規(guī)范內(nèi)容 35
2.3.3制度和流程規(guī)范模板 42
2.4本章小結(jié) 44
第3章企業(yè)大數(shù)據(jù)解決方案 45
3.1企業(yè)大數(shù)據(jù)解決方案實現(xiàn)方式 45
3.1.1獨立研發(fā) 45
3.1.2第三方解決方案 46
3.1.3聯(lián)合開發(fā) 57
3.2如何選擇解決方案 58
3.2.1外部環(huán)境分析 58
3.2.2內(nèi)部環(huán)境分析 59
3.2.3需求規(guī)劃分析 62
3.2.4解決方案特性分析 63
3.2.5解決方案費用評估 67
3.3本章小結(jié) 70
第4章企業(yè)大數(shù)據(jù)自主實施思路 71
4.1制定規(guī)劃原則 71
4.1.1價值性 71
4.1.2實時性 72
4.1.3高效性 72
4.1.4安全性 72
4.1.5延展性 73
4.1.6全局性 74
4.2制定目標藍圖 75
4.3制定建設(shè)目標 76
4.4明確組織規(guī)劃 78
4.4.1組織結(jié)構(gòu)設(shè)計的作用 79
4.4.2組織結(jié)構(gòu)設(shè)立的導(dǎo)向 79
4.4.3組織結(jié)構(gòu)的最終設(shè)立 81
4.5設(shè)計技術(shù)方案 85
4.5.1大數(shù)據(jù)系統(tǒng)建設(shè)方案 85
4.5.2大數(shù)據(jù)系統(tǒng)與傳統(tǒng)BI的融合方案 91
4.6制定人才規(guī)劃 94
4.6.1指導(dǎo)思想 94
4.6.2規(guī)劃原則 94
4.6.3核心內(nèi)容 95
4.7投入產(chǎn)出評估 97
4.7.1數(shù)據(jù)投入與產(chǎn)出的內(nèi)涵 97
4.7.2數(shù)據(jù)投入與產(chǎn)出的特征 98
4.7.3數(shù)據(jù)投入與產(chǎn)出的管理 99
4.8數(shù)據(jù)風(fēng)險管理 105
4.8.1數(shù)據(jù)風(fēng)險管理的概念 105
4.8.2數(shù)據(jù)風(fēng)險管理的類型 106
4.8.3數(shù)據(jù)風(fēng)險管理的原則 109
4.8.4數(shù)據(jù)風(fēng)險管理與控制 110
4.9本章小結(jié) 114
第5章大數(shù)據(jù)技術(shù)介紹 115
5.1核心技術(shù) 115
5.1.1Hadoop生態(tài) 115
5.1.2NoSQL 142
5.1.3實時計算 150
5.1.4全文檢索 160
5.2相關(guān)技術(shù) 204
5.2.1數(shù)據(jù)可視化 204
5.2.2數(shù)據(jù)緩存 220
5.2.3中間件 227
5.2.4關(guān)系型數(shù)據(jù)庫 236
5.2.5數(shù)據(jù)ETL 245
5.3大數(shù)據(jù)算法庫 250
5.4本章小結(jié) 276
第6章大數(shù)據(jù)架構(gòu)設(shè)計 277
6.1大數(shù)據(jù)架構(gòu)設(shè)計原則 277
6.2大數(shù)據(jù)核心架構(gòu)要素 279
6.3大數(shù)據(jù)架構(gòu)設(shè)計模式 284
6.4本章小結(jié) 289
第7章大數(shù)據(jù)技術(shù)開發(fā) 290
7.1數(shù)據(jù)采集 290
7.1.1批量采集 291
7.1.2增量采集 292
7.2數(shù)據(jù)存儲 293
7.2.1HDFS文件存儲引擎 294
7.2.2Hive數(shù)據(jù)存儲引擎 295
7.2.3HBase列式存儲引擎 295
7.2.4MySQL關(guān)系型數(shù)據(jù)存儲引擎 296
7.3多維計算 296
7.4功能服務(wù) 299
7.5平臺管理 301
7.5.1監(jiān)控管理 301
7.5.2調(diào)度管理 302
7.5.3權(quán)限管理 304
7.6應(yīng)用域 307
7.7本章小結(jié) 308
第8章大數(shù)據(jù)工作流 309
8.1數(shù)據(jù)源 310
8.1.1日志/文件 310
8.1.2數(shù)據(jù)庫 310
8.1.3網(wǎng)絡(luò)爬蟲 311
8.1.4第三方API/合作 311
8.2數(shù)據(jù)處理 312
8.2.1數(shù)據(jù)質(zhì)量校驗 312
8.2.2清洗轉(zhuǎn)換 316
8.2.3質(zhì)量提升 320
8.2.4數(shù)據(jù)脫敏 321
8.2.5集成整合 323
8.3數(shù)據(jù)存儲 324
8.3.1關(guān)系型數(shù)據(jù)庫 324
8.3.2分布式文件系統(tǒng) 325
8.4數(shù)據(jù)計算 325
8.4.1三種數(shù)據(jù)計算時效性 325
8.4.2結(jié)構(gòu)化數(shù)據(jù)計算 327
8.4.3半/非結(jié)構(gòu)化數(shù)據(jù)計算 333
8.4.4深度挖掘?qū)W習(xí) 360
8.5數(shù)據(jù)應(yīng)用 376
8.5.1輔助決策 376
8.5.2數(shù)據(jù)驅(qū)動 377
8.6數(shù)據(jù)質(zhì)量管理 379
8.6.1數(shù)據(jù)質(zhì)量建設(shè)的內(nèi)涵 379
8.6.2影響數(shù)據(jù)質(zhì)量的常見因素 380
8.6.3數(shù)據(jù)質(zhì)量建設(shè)的框架 381
8.7本章小結(jié) 392
第9章企業(yè)大數(shù)據(jù)業(yè)務(wù)應(yīng)用 393
9.1大數(shù)據(jù)應(yīng)用場景概述 393
9.1.1場景商業(yè)目的分析 394
9.1.2場景數(shù)據(jù)來源分析 394
9.1.3場景數(shù)據(jù)難易分析 397
9.1.4場景應(yīng)用舉例 397
9.2用戶畫像 407
9.2.1業(yè)務(wù)應(yīng)用背景 407
9.2.2主要實現(xiàn)過程 408
9.2.3關(guān)鍵應(yīng)用場景 414
9.2.4應(yīng)用價值提煉 415
9.2.5場景總結(jié)回顧 417
9.3個性化營銷 419
9.3.1業(yè)務(wù)應(yīng)用背景 419
9.3.2主要實現(xiàn)過程 421
9.3.3關(guān)鍵應(yīng)用場景 424
9.3.4應(yīng)用價值提煉 425
9.3.5場景總結(jié)回顧 426
9.4精準廣告 427
9.4.1業(yè)務(wù)應(yīng)用背景 427
9.4.2主要實現(xiàn)過程 429
9.4.3關(guān)鍵應(yīng)用場景 438
9.4.4應(yīng)用價值提煉 439
9.4.5場景總結(jié)回顧 440
9.5征信 441
9.5.1應(yīng)用場景背景 441
9.5.2主要實現(xiàn)過程 442
9.5.3主要應(yīng)用場景 447
9.5.4應(yīng)用價值提煉 449
9.5.5場景總結(jié)回顧 449
9.6本章小結(jié) 450
第10章 企業(yè)大數(shù)據(jù)價值評估 451
10.1 資產(chǎn)價值 451
10.1.1 數(shù)據(jù)規(guī)模 451
10.1.2 數(shù)據(jù)價值度 452
10.1.3 數(shù)據(jù)鮮活性 454
10.1.4 數(shù)據(jù)關(guān)聯(lián)維度 454
10.1.5 數(shù)據(jù)粒度 455
10.2 業(yè)務(wù)價值 455
10.2.1 用戶體驗提升 455
10.2.2 運營優(yōu)化 457
10.2.3 銷售貢獻 460
10.2.4 供應(yīng)鏈優(yōu)化 461
10.3 本章小結(jié) 462
第11章 大數(shù)據(jù)的社會價值 463
11.1 民生價值 463
11.2 政務(wù)價值 465
11.3 產(chǎn)業(yè)價值 468
11.4 本章小結(jié) 470
第12章 大數(shù)據(jù)當前問題及挑戰(zhàn) 471
12.1 數(shù)據(jù)挑戰(zhàn) 471
12.2 安全挑戰(zhàn) 472
12.3 價值挑戰(zhàn) 474
12.4 認知挑戰(zhàn) 475
12.5 技術(shù)挑戰(zhàn) 478
12.6 人才挑戰(zhàn) 480
12.7 本章小結(jié) 481
第13章 大數(shù)據(jù)未來趨勢 482
13.1 價值資產(chǎn)化 482
13.2 產(chǎn)業(yè)生態(tài)化 487
13.3 主體社會化 490
13.4 應(yīng)用智能化 491
13.5 本章小結(jié) 492
