SMART_基于数据流技术的电信网络流量监控系统.pdf

　第 42 卷 　第 11 期 ( ) 2007 年 11 月 　 山　东 　大 　学 　学 　报 　 理 　学 　版 　 　 　 　 　 　Vol . 42 　 No . 11 ( ) 　 　 　 　 　 Nov. 2007 　 Journal of Shandong University Natural Science 　文章编号 (2007) SMART : 基于数据流技术的电信网络 流量监控系统 1 ,2 1 1 2 1 常建龙 ,闫莺 ,宫学庆 ,戴岱 ,周傲英 ( 1. 复旦大学 　计算机科学与工程学院 , 上海 　200433 ; 2 . 上海电信 , 上海 　200120) 摘要 :大多数国内电信运营商现有的网络流量监控系统的分析都是基于数据文件的操作模式 ,处理速度远跟不上 大量数据到达的速度 。基于这种情况 ,提出了基于数据流技术来实现在线网络流量监控系统 SMART 。SMART 收 集多个路由器发送的Netflow V5 或者 V9 格式的数据 ,并将其转换成用户定义的监控流 ; 以滑动窗口的方式查询输 出流量构成中 Top k 频繁数据信息 ;监测网络流量突变 ; 以可视化的图形和报表形式显示结果 。SMART 先进的数 据流算法技术基础和完整的系统框架设计使得它在上海电信高效稳定的7 24h 运行 。 关键词 :数据流系统 ; 网络流量监控 ; 电信 中图分类号 :TP311. 13 　　　文献标志码 :A SMART : a system for online monitoring large volumes of network traffic CHAN GJianlong1 ,2 , YAN Ying1 , GON G Xueqing1 , DAI Dai2 , ZHOU Aoying1 ( 1. Computer Science and Engineer , Fudan University , Shanghai 200433 , China ; 2 . Shanghai Telecom , Shanghai 200120 , China) Abstract : Monitoring systems deployed in telecom operators are usually too slow because of their diskbased processing approach . To address this problem , an online network traffic monitoring system , named SMART , was designed and developed. The system converts different formats of raw net flow data (Netflow V5 or V9) to userdefined control flows through combination and filtering. It can compute topk frequent flows with sliding window , detect burst on ar