通信行为分析的大数据处理策略的研究.docxVIP

?

?

通信行为分析的大数据处理策略的研究

?

?

杨婧玮

内容摘要随着互联网技术的深度发展，物联网及大数据技术随着“互联网+”的理念已经逐渐蔓延在人们生活的方方面面。可以利用大数据技术，将用户的通信行为进行识别和分析，将用户的行为习惯及变化规律进行研究，并针对性地满足用户的需求。文章对用户行为进行大数据技术层次的研究，有利于更好地掌握用户需求的变化趋势。

关键字通信行为分析大数据处理策略用户需求

1引言

当前，移动端设备已经成为人们生活的基本需求，随着“互联网+”概念的兴起，我国网民群体的规模变得越来越大，运营商需要对用户通信行为进行分析，并进行相应改革。为了减少在传统电信行业中对用户行为发掘过程的不稳定性及资源浪费，可以利用当下物联网大数据技术，对日益增长、数据庞大的用户进行行为习惯及需求的深度挖掘，以对用户展开个性化的服务。

2大数据相关概念及相关技术简介

2.1大數据概述

计算机互联网技术发展至今，已经拥有了海量的用户，越来越多的领域都依托于互联网技术而发展，这也导致了互联网拥有着海量的数据。这些数据中包含着各类价值，是一种虚拟资源，就如同石油和煤矿对人类的作用，对这些海量数据的开采也将为人类世界带来前所未有的便利和价值，为此大数据技术应运而生[1]。大数据技术将庞大且复杂的数据流进行挖掘和分析，并对这些数据中的规律进行深层探索，发掘出有效、准确、多样的用户信息。

2.2大数据技术用户分析系统平台

大数据需要依托处理平台来进行数据处理，在用户通信分析上，可以使用Hadoop分布式系统。该系统自出现到现在十余年中经过不断地改进和完善，已经拥有了强大的功能，具有强大的生态，各级组件或者系统分工明确。Hadoop系统在开发方面并不需要按部就班地将底层细节进行大规模的投入研发，而是可以直接简化开发过程，先模块化底层细节，研究人员就可以将精力投入在上层开发上，大大提高了开发效率[2]。同时，在传统的分布式开发过程中由于容量庞大导致在数据运行方面发生存储器失效、网络连接中断、数据丢失等问题，而Hadoop系统则可以将一份数据存储在多个地方，称为“复制因子”，减小了故障发生率。Hadoop系统也可以通过叠加设备、扩展集群的方式提高系统的运算及存储性能，非常方便。

2.3Hadoop平台的构成

Hadoop平台的构成较为复杂，具有资源管理系统、分布式文件系统、数据储藏系统、分布式列存数据库、分布式协作服务、数据同步工具等多系统或组件，其中最为关键的两个部分是分布式文件系统（HDFS）和分布式计算框架（MapReduce）。Hadoop框架最基础的就是HDFS，简单来说就是一类将平台所有文件进行存储的一类结构。而在数据的处理过程中则是依靠MapReduce来进行，该引擎是将map函数和reduce函数共同对由main函数输入的数据进行转换和缩小，最后通过main函数将处理之后的文件输出。其他的结构或者系统都各自在HDFS和MapReduce的基础上运行[3]。

3对客户行为的分析要点

3.1掌握客户的群体构成

不同阶层、年龄、性别、职业的客户之间有着不同的行为习惯和能力。例如，在消费方面，学生对书籍、文具等类型的商品购买率较高，而消费水平通常并不是很高，但是收入水平较高的高管就会对职场中对自己有利的商品或者办公用具有着较高水平的消费和购买率。所以，掌握用户群体有利于分析和判断他们在各方面的行为习惯，同时给予他们更智能便捷的服务。

3.2记录顾客的使用地

商家通过对用户所在地进行法律要求范围内的定位，一般情况下会利用GPS或者基站等方式。定位功能主要在于当移动端使用者遇到了紧急情况但是却无法说清自己所处的位置的时候，方便援救者及时进行救援采取措施，另外，在用户的移动设备丢失之后，可以通过定位功能来找到设备所在位置。定位功能将分配信号的问题大大简化，实现了信号资源的合理分配。

3.3描述用户使用习惯

用户在客户端访问互联网时，需要知道用户对某软件或应用的使用率，通过用户对某应用的使用习惯获取用户的爱好，或者根据用户访问互联网的时间段、地点等信息分析出用户的出入场所、爱好，根据这些分析推出一定的服务措施。例如，用户喜欢出入某书城或者图书馆，就可以针对此为该客户推荐书籍应用和小说服务。

4基于大数据的用户行为分析探究

4.1通信用户分析的大数据系统功能要求

在大数据分析平台上，采集收纳大量数据之后，平台系统要从IP、端口等方面将用户的通信行为进行统计，并且要能够还原及重组TCP、UDP等协议，并且平台需要有应对大量数据的能力，因为用户信息量大，实时产生的数据非常多，且类型复杂、结构不明确，所以要有快速处理能力。最后则是对用户通信行为的查找、统计和分析，将用户使用的网络协议、互联网使用的侧重点进行统计并分析其