大数据技术原理与案例应用.pptxVIP

第一章

大数据技术及实训学习概述

C

O目1.大数据技术概述

N

T2.大数据平台架构

E录

N3.大数据开发案例实训学习介绍

T

S

1.1大数据技术概述

大数据概念

21世纪以来，随着计算机技术，尤其是互联网和移动技术的发展，

人们能够获取的数据规模呈爆炸性增长，“大数据”概念应运而生。

•麦肯锡全球研究院/维基百科定义：大数据(bigdata)，是指

无法在可承受的时间范围内用常规软件工具进行捕捉、管

理和处理的数据集合。

•《大数据时代》：大数据指不用随机分析法(抽样调查)这样

的捷径，而采用所有数据进行分析处理。

•Gartner机构：“大数据”是需要新处理模式才能具有更强

的决策力、洞察发现力和流程优化能力的海量、高增长率ü大数据研究的先河之作《大数据时代》

和多样化的信息资产。ü作者维克托·迈尔-舍恩伯格及肯尼斯·库克耶

ü书中讲述了大数据时代的思维变革、商业变

革和管理变革

大数据概念的理解

ü认识大数据，可以从“资源、技术、应用”三个层次来理解：

•大数据资源：是具有体量大、结构多样、时效强、价值密度低等特征的数据

•大数据技术：需采用新型计算架构和智能算法等新技术大数据的”4V”特征

•大数据应用：以数据驱动决策、发现新的知识，基于数据、在线闭环的业务流程优化

ü大数据：是新资源、新技术和新应用的综合体

新资源

大数据

新应用新技术

大数据技术发展历史

“大数据”成为国家发展战略

2015年2016年2017年2018年2019年2020年2021年2022年2023年

大数据完成顶层大数据政策、文中央政治局就实地方政府陆续成大数据融入到人工数据成为继土地、“十四五”大数据中共中央国务院关于构建数据基础中共中央国务院印发《数

设计，上升为国件陆续出台。施国家大数据战立大数据局，着智能、数字经济、劳动力、资本、技产业发展规划发布，制度更好发挥数据要素作用的意见字中国建设整体布局规划》

家战略。略进行第二次集手体制机制建设。数字治理、个人信术之后第五种市场释放数据要素价值（数据二十条）数据作为新型生产要以“整体”思维，破解

体学习。息保护等相关政策化配置的关键生产和保障数据安全是素,对土地、劳动力、资本、技术等“跨”的问题，实现“通”