- 1、本文档共15页,可阅读全部内容。
- 2、有哪些信誉好的足球投注网站(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
- 3、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
- 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
- 5、该文档为VIP文档,如果想要下载,成为VIP会员后,下载免费。
- 6、成为VIP后,下载本文档将扣除1次下载权益。下载后,不支持退款、换文档。如有疑问请联系我们。
- 7、成为VIP后,您将拥有八大权益,权益包括:VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
- 8、VIP文档为合作方或网友上传,每下载1次, 网站将根据用户上传文档的质量评分、类型等,对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档
电信人口大数据详细设计说明书
XX科技股份有限公司编制
目录
TOC\o1-3\h\z\u一、 电信人口大数据系统软件模块设计 4
二、 电信人口大数据项目系统接口及函数 4
1 数据生产 4
1.1.1 数据生产函数 4
1.2 数据采集 5
1.2.1 数据采集接口 5
1.2.2 数据存储函数 6
1.3 数据分析 7
1.3.1 数据分析函数 7
1.4 可视化展示 7
1.4.1 用户接口 7
1.4.2 菜单接口 8
1.4.3 角色接口 9
1.4.4 电信人口流动人口年龄分析接口 9
1.4.5 电信人口流动人口学历接口 10
1.4.6 电信人口流动人口分析接口 11
1.4.7 电信人口流动人口职业分析接口 11
1.4.8 电信人口人口流动地区分析接口 12
三、 电信人口大数据系统数据格式 12
1. 数据格式设计说明 12
四、 电信人口大数据系统数据库表结构 14
1. 表结构设计图 14
电信人口大数据系统软件模块设计
表1电信人口大数据模块设计表
序号
一级模块
二级模块
三级模块
说明
1
数据生产
电信人口数据生产
2
数据采集/存储
使用Flume、Kafka组件将电信客户数据存储到HBASE中
3
数据分析
使用MapReduce将HBASE中的数据经过分析处理之后导入到MySQL中
4
可视化展示
系统管理
系统状态监控、系统信息查看
5
权限管理
资源管理
系统菜单管理、路径管理
6
角色管理
系统使用角色管理、权限管理
7
用户管理
系统登录用户管理
8
电信人口数据分析
流动人口年龄分析
使用图形展示不同年龄阶段的流动人口的占比和数量情况。
9
流动人口学历分析
使用图形展示流动人口中不同学历的占比和数量情况。
10
流动人口分析
使用图形展示一线城市中的流动人口一年内的数量变化趋势情况。
11
流入人口分析
使用图形展示全国各大区域内的流入人口一年内的数量变化趋势情况。
12
流入人口性别分析
使用图形展示流入人口性别和流出人口性别的占比和数量情况。
13
流动人口职业分析
使用图形展示一年内流动人口的不同职业的数量趋势情况。
14
流出人口分析
使用图形展示全国各大区域内的流出人口一年内的数量变化趋势情况。
人口流动地区分析
使用图形展示全国各地城市的流动人口数量情况。
电信人口大数据项目系统接口及函数
数据生产
数据生产函数
函数类
com.product.test.MockRecords
生产类
TestMockRecords
需求优先级
高
系统输入或系统外激励
系统响应
系统调用生产函数,设定相应的输出文件及输出路径
根据设定路径,生产相应的数据文件
功能需求
数据生产
例外以及相应处理
调用的功能
数据生产
注释和说明
数据采集
数据采集接口
接口地址
/hhrzkg/system/dataCollection
用户类
系统
需求优先级
高
系统输入或系统外激励
系统响应
设定flume采集的源文件和数据下沉的位置,将数据采集到kafka集群中
Kafka集群出现相应的数据
功能需求
数据采集
例外以及相应处理
调用的功能
数据采集
注释和说明
数据存储函数
函数类
com.hbase.consumer
用户类
HbaseConsumer
需求优先级
高
系统输入或系统外激励
系统响应
设置kafka消费主题,使用HBASE消费数据
将kafka集群中的待数据存储到HBASE中
功能需求
数据存储
例外以及相应处理
调用的功能
数据存储
注释和说明
数据分析
数据分析函数
函数类
com.bigdata.analysis.runner
用户类
CountDurationRunner
需求优先级
高
系统输入或系统外激励
系统响应
配置源HBASE、目标MYSQL数据格式,配置清洗策略
将HBASE数据经过分析后存储MySQL
功能需求
数据分析
例外以及相应处理
调用的功能
数据分析
注释和说明
可视化展示
用户接口
接口地址
/hhrzkg/system/admin
用户类
系统管理员
需求优先级
高
用户输入或系统外激励
系统响应
1.用户输入用户名、密码
1.比对输入用户是否存在,并返回相应结果。
2.新增用户;
3.删除用户;
4.修改用户。
功能需求
用户登录系统、用户修改信息、管理员新增和删除用户
例外以及相应处理
调用的功能
系统登录、用户信息修改、新增和删除用户
注释和说明
菜单接口
接口地址
/hhrzkg/system/res
用户类
系统管理员
需求优先级
高
用户输入或系统外激励
系统响应
文档评论(0)