《计算机应用基础》课件——培养大数据思维.pdfVIP

什么是大数据

大数据的关键技术

大数据的应用

大数据的概念

“大数据”是指体量特别大、

类别特别复杂的数据集。

难以用传统的技术和软件对

它们进行抓取、管理和处理。

大数据的概念

指大数据处理速度快。很多平台对大数据处理速度有着非常严

快速化

格的要求，甚至需要做到实时分析。

目前，对大数据的处理要求是“1秒定律”：要求在秒级范围

内给出数据的分析结果。

大数据的概念

指大数据类型繁多。近几年，随着传感器种类的增多，移动设

多样化

备、社交网络等的流行，产生了各种复杂多样的数据类型。

除了传统的可以用二维表格量化的结构化数据，无法用固定结

构表达的非结构化数据越来越多，包括：图片、视频、音频、地理

位置等。

大数据的关键技术

大数据采集

大数据预处理

大数据分布式存储

大数据分析

大数据可视化呈现

数据并行计算框架

大数据的关键技术

大数据采集

大数据采集是指通过移动终

端、物联网终端或互联网等多种渠

道获取结构化、半结构化及非结构

化等多种类型的海量数据的过程。

大数据的关键技术

大数据预处理

大数据预处理是指对已采集的种类繁多的数据进一步进行整合处理。

即将非同源的、异构的数据集的

数据进行收集、整理、清洗、转换，

从而生成一个新的数据集，为数据的

查询和分析处理提供统一的视图。

大数据的关键技术

大数据并行计算框架

面对海量数据，在整个大数据处理环节都有大数据并行计算框架的支撑。

大数据的应用

电商个性化推荐

基于大数据技术实现的商品

个性化推荐在电子商务领域的应

用已经非常成熟，具体是指电商

平台根据每个用户不同的兴趣爱

好为其推荐可能感兴趣的商品。

大数据的应用

新冠肺炎疫情防控

国内相关部门将大数据技术

与网格化的管理措施相结合，做

到了疫情的精准预测和有效防控，

在抗疫工作上取得了令广大群众

满意的成绩。