企业级大数据处理技术作业指导书.docVIP

企业级大数据处理技术作业指导书

TOC\o1-2\h\u26723第1章企业级大数据处理概述 4

300521.1大数据概念与价值 4

105851.2企业级大数据处理需求 4

36481.3大数据处理技术架构 5

26666第2章数据采集与预处理技术 5

245132.1数据源接入与采集 5

193062.1.1数据源类型 5

107072.1.2数据采集方式 5

82822.1.3数据采集策略 5

260322.2数据预处理方法 5

164772.2.1数据解析 6

327602.2.2格式转换 6

90152.2.3重复数据检测 6

246922.3数据清洗与转换 6

31312.3.1数据校验 6

54052.3.2数据补全 6

291242.3.3数据转换 6

251112.4数据集成与存储 6

311602.4.1数据存储结构 6

181082.4.2数据索引 6

314602.4.3数据压缩 6

184292.4.4数据安全与隐私保护 6

12913第3章分布式存储技术 7

47503.1分布式文件系统 7

55683.1.1概述 7

234873.1.2常见分布式文件系统 7

113783.1.3分布式文件系统关键技术 7

240593.2分布式数据库 7

315923.2.1概述 7

302623.2.2常见分布式数据库 7

43473.2.3分布式数据库关键技术 7

209483.3数据仓库与OLAP技术 7

9573.3.1数据仓库概述 7

227413.3.2OLAP技术 7

1323.3.3常见数据仓库与OLAP工具 8

77483.3.4数据仓库与OLAP技术在大数据处理中的应用 8

10638第4章大数据计算框架 8

126044.1MapReduce计算模型 8

225264.1.1基本原理 8

151084.1.2执行流程 8

66574.1.3应用场景 8

314994.2Spark计算框架 9

233884.2.1基本原理 9

306714.2.2核心组件 9

213014.2.3应用场景 9

133004.3流式计算与实时处理 9

269624.3.1基本概念 9

289504.3.2技术原理 9

56694.3.3应用场景 10

5653第5章大数据分析技术 10

72605.1数据挖掘与知识发觉 10

156045.1.1数据挖掘技术 10

122405.1.2知识发觉技术 10

195885.2机器学习与深度学习 10

320035.2.1机器学习技术 10

257005.2.2深度学习技术 11

239595.3大规模数据聚类与分类 11

220595.3.1大规模数据聚类技术 11

105885.3.2大规模数据分类技术 11

319225.4数据可视化与交互分析 11

207105.4.1数据可视化技术 11

27745.4.2交互分析技术 11

5585第6章大数据查询与分析技术 12

299996.1SQLonHadoop技术 12

56546.1.1概述 12

303466.1.2技术架构 12

192356.1.3技术优势 12

279456.2NoSQL数据库查询 12

252346.2.1概述 12

325376.2.2技术分类 12

178406.2.3查询方式 13

97546.3大数据索引与优化 13

36416.3.1索引技术 13

20356.3.2优化策略 13

230266.4多维数据分析与查询 13

261446.4.1概述 13

153646.4.2技术方法 13

21116.4.3应用场景 14

16969第7章大数据安全与隐私保护 14

242377.1数据安全策略与机制 14

301857.1.1数据安全策略 14

182187.1.2数据安全机制 14

148427.2数据加密与脱敏技术 15

275207.2.1数据加密技术 15

163837.2.2数据脱敏技术