大数据技术学习与运用指南.docVIP

大数据技术学习与运用指南

TOC\o1-2\h\u32325第1章大数据基础概念 3

31871.1数据与大数据 3

27921.2大数据的特征与价值 4

252801.3大数据应用领域 5

14083第2章大数据技术架构 5

262452.1大数据技术栈 5

215172.2分布式计算框架 6

216272.3分布式存储系统 6

140第3章数据采集与预处理 6

69093.1数据采集技术 6

152833.1.1网络爬虫技术 6

260203.1.2API接口调用 7

284213.1.3传感器与物联网技术 7

314803.1.4公开数据集与数据仓库 7

260643.2数据预处理方法 7

93163.2.1数据清洗 7

106883.2.2数据集成 7

233143.2.3数据变换 8

135363.3数据清洗与转换 8

21353.3.1数据清洗 8

114533.3.2数据转换 8

24281第4章数据存储与管理 8

142184.1关系型数据库 8

147464.1.1关系型数据库概述 8

172654.1.2关系型数据库的关键技术 8

62744.1.3常见关系型数据库 9

65284.2非关系型数据库 9

200064.2.1非关系型数据库概述 9

83914.2.2非关系型数据库的分类 9

206994.2.3非关系型数据库的优势 9

70794.3大数据存储技术 9

290204.3.1分布式文件系统 9

144374.3.2分布式数据库 9

29454.3.3云计算存储服务 9

223924.3.4数据仓库 10

107204.3.5新兴存储技术 10

15664第5章数据分析与挖掘 10

69955.1数据挖掘基础 10

209025.1.1数据挖掘概念 10

127155.1.2数据挖掘任务 10

268985.1.3数据挖掘流程 10

233345.2数据分析方法 10

81925.2.1描述性分析 10

52125.2.2诊断性分析 11

291795.2.3预测性分析 11

242515.2.4规范性分析 11

98825.3常见数据挖掘算法 11

19995.3.1分类算法 11

205175.3.2回归算法 11

122705.3.3聚类算法 11

123275.3.4关联规则挖掘算法 11

13041第6章大数据计算模式 12

147496.1批处理计算 12

276956.1.1批处理计算原理 12

260266.1.2批处理计算技术架构 12

222276.1.3批处理计算应用实践 12

304636.2流式计算 12

220706.2.1流式计算原理 12

269586.2.2流式计算技术架构 13

35816.2.3流式计算应用实践 13

300806.3图计算 13

122756.3.1图计算原理 13

62896.3.2图计算技术架构 13

56366.3.3图计算应用实践 14

14898第7章大数据查询与优化 14

288687.1SQLonHadoop技术 14

147607.1.1概述 14

223677.1.2常见SQLonHadoop工具 14

67887.2大数据查询优化策略 14

112437.2.1执行计划优化 14

61757.2.2数据布局优化 15

80547.3基于索引的查询优化 15

240727.3.1索引概述 15

151677.3.2常见索引类型 15

216977.3.3索引创建策略 15

16636第8章大数据可视化 15

116428.1数据可视化基础 15

5458.1.1可视化的目的 16

278318.1.2可视化类型 16

37118.1.3可视化流程 16

294378.2常见可视化工具 16

237308.2.1商业软件 16

153488.2.2开源软件 16

254058.3可视化设计原则与技巧 17

40078.3.1设计原则 17

3908