大数据时代的挑战及应对策略研究.docx

?

?

大数据时代的挑战及应对策略研究

?

?

莫平凡

【摘要】随着互联网和信息技术的进步，我们的社会已经进入了大数据时代。在这样一个信息化的社会中，节奏飞快，无时无刻不在产生大量的信息。在每个社会领域中，大数据的应用至关重要，它在节约社会成本，提高生产效率和提供公共服务方面等方面发挥了重要的作用。本文在大数据背景下，分析了大数据时代下数据的特征，对社会形成的挑战以及应对策略这几个方面。

【关键词】大数据特征挑战应对策略

一、引言

我们的社会是一个高速发展的社会，技术发达、信息通畅，大家的交流越来越密切，生活也越来越便利，正是大数据才促成了这一发展趋势。当前大数据已经发展成为一个新兴产业，同时与其他各产业相互交叉融合，在社会生活中发挥了巨大的作用。但是它对我们传统的生活生产方式也提出了巨大的挑战，我们需要积极应对。处于这样的一种情况下，有必要对大数据特征进行分析，及时发现我们面对的挑战，并提出切实的可行性措施，更好的应对当前的时代环境。

二、定义与特征

虽然大数据一词早已活跃于我们的视听，但是想必很多人对此并没有深入的了解，在此，首先给出了大数据的定义和特征，给出大家一个相对客观的描述。

大数据（BigData）定义：指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。

大数据的特征：Volume（大量）：数据量很庞大，基于大数据的出现，数据存储单位从PB发展到ZB、DB；Velocity（高速）：不仅获取信息的速度非常快，而且处理数据速度也快；Variety（多样）：信息类型的多样，从文字到图片再到视频，种类繁多；Value（低价值密度）：指虽然数据量多，但是有价值的信息却并不多，用低成本创造高价值；Veracity（真实性）：数据质量真实可信。

三、大数据时代带来的挑战与问题

（一）数据存储与管理挑战

大数据背景下，全世界的数据量呈爆炸式增长，这对于传统的数据存储技术来说是个巨大的挑战。当前数据类型多样化，有结构化数据，也有非结构化数据，继续运用传统数据的存储方式，可能导致数据出现混乱。信息时代下，社会主体担心数据被窃取，因而各自都是独立存储数据，造成了数据之间的独立，这对于当前环境下各个主体的发展是极不利的。

（二）信息挖掘能力的挑战

当前数据类型繁多，不仅是数据存储和管理面临挑战，对数据挖掘获得有利信息也是一大挑战。传统的数据挖掘算法已经不能适应新出现的多种数据类型，这成为了数据挖掘的一大瓶颈。如果我们获得了越来越多的数据，而不能对此进行系统分析处理来获取有价值的信息，那么已获得的数据对我们来说就如同白纸，毫无价值。

（三）数据安全与隐私问题

信息时代下，各种活动大都要通过网络来完成，使得大量数据在不同的网络之间传播，数据足迹的累积性和相关性增加了数据的被泄露的风险。传统的保护措施与方法已经不能再适应大数据的需要，而且黑客越来越活跃在网络世界，严重威胁信息安全。另外隐私保护成为更具挑战的一项问题，无论是政府、集体还是个人，都有数据公开与隐私保护的矛盾性。

（四）大数据下缺乏技术型人才

社会要发展，人才是关键，在大数据的背景下，更需要高级技术人才。如果人才资源不足就会严重阻碍大数据的发展，社会就会停止进步。大数据产业是一个融合性比较高的产业，覆盖范围很大，所以需要的技术人才必须具备综合的能力。这样才能更好的了解各个行业，了解各个技术层面，以较综合的视角提供解决问题的可行方案。

四、应对策略

（一）升级数据处理技术

目前在数据存储、管理与分析方面面临挑战，改革创新数据处理技术被提上日程。大数据时代数据量非常庞大，对此可将收集到的数据进行分类，梳理数据脉络，确定有价值的数据。在数据存储方面需要改革之前数据的孤立状态，建立数据集中存储系统，最关键的是数据的压缩技术和冗余数据删除技术。在此基础之上，就可以实现有效率的数据分析，最大程度的挖掘数据隐含价值。

（二）加强数据安全保护措施

小到个人隐私，大到商业机密甚至是国家数据安全，都受到来自大数据时代的挑战。对此，在数据安全方面，要对数据的存储和传输进行加密处理，并且要实时追踪监测，加强对数据的监管能力。这也有必要对国家相关工作部门进行提出相应的工作要求，严控网络信息安全，打击黑客犯罪，维护网络治安。

（三）培养高级数据处理人才

大数据产业在2015年就已经被提高到国家战略层面，国务院印发的《纲要》中指出要加大人才培养力度。目前，在大数据行业打拼的从业者大部分都是半路出家，鲜有人接受过系统化的培养和教育。人才是关键，在大数据这一新兴产业中，尤其突出。政府、高校及培训机构应该大力提倡数据处理人才的培养，抓住机遇，提升竞争力。

五、结语

随着大数据的飞速发