中国移动政企分公司流量流向分析系统案例

项目背景


为了实现对所辖用户的手机、数据卡、上网本/笔记本等终端上网访问的上下行内容进行实时采集和监测,中国移动政企分公司采购了1套乐天堂体育网流量流向分析系统,该流量流向分析系统集中部署在中国移动国际信息港公有云上,元数据主要来自南方基地公有云、国际信息港IDC、国际信息港CMNet机房、北京三台机房、信息港公有云5个机房出口统一DPI的数据。本期工程由信息港公有云和信息港IDC提供所需云平台资源和物理服务器,所需通用服务器、存储及网络设备由中国移动集采或利旧;方案完全兼容中国移动公有云资源池和集采的硬件设备。

移动-1CMNet骨干图.jpg


解决方案


一、系统概述

本次流量流向分析系统采用Hadoop分布式文件系统(HDFS),通过获取统一DPI提供的会话级数据(XDR话单)和统计级数据进行话单关联、合成、分析实现客户流量流向分析,流量计费数据采集和展示,IDC客户流量分析、流量控制等功能。

 

二、系统架构

流量流向分析系统架构主要由日志采集系统、数据解析处理模块、功能分析模块、应用展示模块等功能模块组成,系统软件架构如下图所示:

1540230496581087.jpg

大数据流量流向系统架构图

三、系统功能


1.流量流向分析

刻画流量的运营商来源和区域分布,以及各流向内的流量应用构成等;支持排名分析、趋势分析、对比分析、多维分析等。

  • 流量流向分析业务流量全程可视,包括区域流向、运营商分布、流量的应用构成等。

  • 流量流向分析展示方式多样,提供GIS地图展示功能,支持饼图、柱图、曲线图、表格等方式,并支持图表切换,统计结果支持导出功能。

  • 流量流向分析统计对象维度多样,包括整体、IDC机房、IDC客户、IDCIP、SP等。

  • 流量流向分析统计时间粒度支持小时、天、周、月。

  • 流量流向分析支持排名分析、趋势分析、对比分析、多维关联分析,支持多级钻取查看详细信息功能。


2. 应用分析

刻画整体流量的应用分布情况,包括业务大类、业务小类等,以及各应用在各区域的流量构成等;支持排名分析、趋势分析、对比分析、多维分析等。

  • 针对IDC流量进行应用分析,支持应用(大类)和子应用(小类)的流量统计和访问次数/用户数量统计。

  • 支持根据会话级XDR数据和业务流量统计级数据进行分析。


3. 业务质量分析

业务质量分析主要目的是对网络的性能状况进行检测,包括响应延迟、业务加载延迟、重传次数等,并给出性能指标,针对网络视频、网页浏览、网络游戏、IM等进行分析。


4. 热点分析统计

热点分析提供热点网站、热点应用、热点服务器TOPN排名,分析内容包括流量、点击量、访问用户数等。并提供热点网站、热点应用的趋势分析。


5.  IDC计费分析

支持针对单个IDC客户实现95计费功能,提供95计费详单查询,并生成95计费报表。IDC客户流量明细话单的生成周期可配置(周或者月),支持至少保存6个月的流量统计记录。


6. 流控功能

流量流向分析系统可生成流量控制策略策略,通过向统一DPI设备下发流量管理策略,以实现流量、访问控制及带宽保障功能。

 

方案优势


1.流量可视化

以可视化的方式呈现,帮助管理人员全面掌握网络中各节点、各服务器的流量成分,让网络管理、营销工作有据可循。


2.流量流向分析

及时发现网络中服务器是否存在大量跨区域、跨网流量,减少网间结算成本,杜绝收支倒挂的现象发生。


3.热点资源分析

可以有效评估CDN资源的引入是否达到预期的流量本网率指标要求,为CDN业务的持续优化提供依据。


4.业务质量分析

通过建立质量分析模型,监控热点资源、热点ICP及其分发网络的质量状态,基于知识库分析质差原因给出改进措施,有效保障服务质量。


5.CDN计费分析

支持针对单个IDC客户实现95计费功能,提供95计费详单查询并生成95计费报表,大大提高了客户的工作效率。