大数据时代信息获取技术研究.docx

??

?

??

大数据时代信息获取技术研究

?

??

?

?

?

?

?

?

?

???

?

?

?

?

?

丁铄彭

摘要：自人类经过两次工业革命的洗礼以后，解放和提高生产力已经成为科技不断进步追求的重要目标。二十一世纪以来信息技术的不断升级，计算量和计算能力的不断扩增和提高，催生和带动了信息时代的来临，以“云计算”为代表的“大数据”时代开启的现代科技进步的新篇章。该文阐述了“大数据”背景下对原始数据的获取的技术研究，主要通过以阿里巴巴为例来阐述这一问题。

关键词：大数据时代；信息获取；技术；研究

中图分类号：TP311文献标识码：A文章编号：1009-3044（2018）03-0003-02

1概述

1.1信息获取技术

“云计算”的强大之处在于当信息量处于以兆亿为基础时，通过高等算法将信息批量化处理分级，统计计算其宏观规律，获得小信息量下很难得到的规律和前瞻性判断，从而得到对事情的提前预知和预测。但是“云計算”这个超级大脑需要足够的信息量作为其判断的准则和事件分析的基础。就好像古代战争中的“军师”需要大量的信息才能对战争进行准确的判断和分析，并对战局进行准确的调整，从而获得战争的胜利。

所以“大数据时代”信息的获取显得尤为关键。计算机并不能像我们的大脑一样处理丰富来源的信息，需要人为地将各种各样的信息转化成数字信息来完成原始信息的积累。现代的信息获取技术主要呈现为以下三种类型：

1）传感技术

通俗地讲，传感技术就是传感器的技术，就像人类的我们的感受神经元一样，传感器是指可以感知周围环境或者特殊物质，比如气体信息感知、光线信息感知、温湿度信息感知、人体生理信息感知等等，把模拟信号转化成数字信号，给中央处理器处理也就是中枢神经。最终结果形成气体浓度参数、光线强度参数、范围内是否有人探测、温度湿度数据等等，显示出来，最终储存至储存单元。

2）遥测技术

遥测是主要利用传感技术、通信技术和数据处理技术的一门综合性技术。遥测主要用于我们常说的“触不可及”的地方，也就是集中检测分散的或难以接近的被测对象。例如被测对象的地理距离遥远，所处环境恶劣，或处于高速运动的状态。当前的还处于发展状态，随着人类活动空间的增长，遥测技术也在日新月异是信息获取能力进步的重要信息源。

3）遥感技术

运用现代化的运载工具和传感器，通过该信息的传输、贮存、卫星、修正、识别目标物体，从远距离获取目标物体的电磁波特性，最终实现其功能（定时、定位、定性、定量）。根据洛伦兹的电磁波的理论，应用不同的传感仪器对具有一定空间限制的远距离目标所辐射和反射的电磁波信息，进行收集、处理，并最后在终端成像，通过遥感技术，我们可以探究“天外天，山外山”，收集人类生理水平达不到的信息。

1.2阿里巴巴信息获取技术现状

自2008年初，马云率领的阿里集团通过对用户行为数据的挖掘和分析，发现整体买家询盘数急速下滑，与此同时，欧美对中国采购也与日俱减。阿里集团在提前半年的时间里，准确预测出世界外贸经济的走势，从而躲避了金融危机，可以说阿里巴巴不管是对原始信息的获取还是对数据的“云计算”都走在和行业的前端，以下是笔者对阿里巴巴的信息获取技术现状进行的简要分析。

1）业务分类

阿里巴巴目前已经形成了一个以支付手段为核心的连接点，围绕着电子商务核心业务及支撑电子商务体系的金融业务，以及配套的本地生活服务、健康医疗等，这一商业生态圈的核心旨在共享数据及流量，以营销服务及云服务为基础，而有效数据的整合抓手就是支付宝。

主要业务包括：淘宝网、天猫、聚划算、一淘、阿里音乐集团、支付宝、阿里巴巴国际交易市场、全球速卖通、1688、阿里云计算。

2）信息获取途径

第一、利用间接信息处理。通过在渠道上上购买某有哪些信誉好的足球投注网站公司的原始信息进行数据化分析。但是当购买数量较大时，即便这可能不是实时更新的资料，也会存在一定的互联网用户的数据资料。有哪些信誉好的足球投注网站引擎公司通过利用广告联盟的平台，在其间接公布的用户有哪些信誉好的足球投注网站的画像数据直接利用，从而完成信息的原始积累。

第二、合理利用各端口用户的cookie数据。当我们作为用户在使用手机或电脑浏览淘宝的同时，会自动生成cookie文件，并发送给远端的服务器。计算机会在在用户的端口中暂时存放的资料（一般是以.txt格式存放的文本文件）。

第三、利用APP软件的用户信息。阿里巴巴旗下有众多的APP应用软件，涉猎各个领域。日前，APP所带来的用户数据是获取目标用户移动端数据的有效手段之一。在APP中预埋SDK插件，用户所使用的APP内容就能够及时将数据信息汇总至指定服务器。

第四、直接和拥有稳定数据源的企业进行长期合作。阿里巴巴的自身价值链相对健全，数据变现的通道比较完备，不会轻易输出与第三方合作的数据（获取除外）。但是作为商业团体，阿里巴巴的商业生态有一套完整的获取信息的链条