項目背景
為了實現(xiàn)對所轄用戶的手機、數(shù)據(jù)卡、上網(wǎng)本/筆記本等終端上網(wǎng)訪問的上下行內容進行實時采集和監(jiān)測,中國移動政企分公司采購了1套百卓流量流向分析系統(tǒng),該流量流向分析系統(tǒng)集中部署在中國移動國際信息港公有云上,元數(shù)據(jù)主要來自南方基地公有云、國際信息港IDC、國際信息港CMNet機房、北京三臺機房、信息港公有云5個機房出口統(tǒng)一DPI的數(shù)據(jù)。本期工程由信息港公有云和信息港IDC提供所需云平臺資源和物理服務器,所需通用服務器、存儲及網(wǎng)絡設備由中國移動集采或利舊;方案完全兼容中國移動公有云資源池和集采的硬件設備。
解決方案
一、系統(tǒng)概述
本次流量流向分析系統(tǒng)采用Hadoop分布式文件系統(tǒng)(HDFS),通過獲取統(tǒng)一DPI提供的會話級數(shù)據(jù)(XDR話單)和統(tǒng)計級數(shù)據(jù)進行話單關聯(lián)、合成、分析實現(xiàn)客戶流量流向分析,流量計費數(shù)據(jù)采集和展示,IDC客戶流量分析、流量控制等功能。
二、系統(tǒng)架構
流量流向分析系統(tǒng)架構主要由日志采集系統(tǒng)、數(shù)據(jù)解析處理模塊、功能分析模塊、應用展示模塊等功能模塊組成,系統(tǒng)軟件架構如下圖所示:
三、系統(tǒng)功能
1.流量流向分析
刻畫流量的運營商來源和區(qū)域分布,以及各流向內的流量應用構成等;支持排名分析、趨勢分析、對比分析、多維分析等。
流量流向分析業(yè)務流量全程可視,包括區(qū)域流向、運營商分布、流量的應用構成等。
流量流向分析展示方式多樣,提供GIS地圖展示功能,支持餅圖、柱圖、曲線圖、表格等方式,并支持圖表切換,統(tǒng)計結果支持導出功能。
流量流向分析統(tǒng)計對象維度多樣,包括整體、IDC機房、IDC客戶、IDCIP、SP等。
流量流向分析統(tǒng)計時間粒度支持小時、天、周、月。
流量流向分析支持排名分析、趨勢分析、對比分析、多維關聯(lián)分析,支持多級鉆取查看詳細信息功能。
2. 應用分析
刻畫整體流量的應用分布情況,包括業(yè)務大類、業(yè)務小類等,以及各應用在各區(qū)域的流量構成等;支持排名分析、趨勢分析、對比分析、多維分析等。
針對IDC流量進行應用分析,支持應用(大類)和子應用(小類)的流量統(tǒng)計和訪問次數(shù)/用戶數(shù)量統(tǒng)計。
支持根據(jù)會話級XDR數(shù)據(jù)和業(yè)務流量統(tǒng)計級數(shù)據(jù)進行分析。
3. 業(yè)務質量分析
業(yè)務質量分析主要目的是對網(wǎng)絡的性能狀況進行檢測,包括響應延遲、業(yè)務加載延遲、重傳次數(shù)等,并給出性能指標,針對網(wǎng)絡視頻、網(wǎng)頁瀏覽、網(wǎng)絡游戲、IM等進行分析。
4. 熱點分析統(tǒng)計
熱點分析提供熱點網(wǎng)站、熱點應用、熱點服務器TOPN排名,分析內容包括流量、點擊量、訪問用戶數(shù)等。并提供熱點網(wǎng)站、熱點應用的趨勢分析。
5. IDC計費分析
支持針對單個IDC客戶實現(xiàn)95計費功能,提供95計費詳單查詢,并生成95計費報表。IDC客戶流量明細話單的生成周期可配置(周或者月),支持至少保存6個月的流量統(tǒng)計記錄。
6. 流控功能
流量流向分析系統(tǒng)可生成流量控制策略策略,通過向統(tǒng)一DPI設備下發(fā)流量管理策略,以實現(xiàn)流量、訪問控制及帶寬保障功能。
方案優(yōu)勢
1.流量可視化
以可視化的方式呈現(xiàn),幫助管理人員全面掌握網(wǎng)絡中各節(jié)點、各服務器的流量成分,讓網(wǎng)絡管理、營銷工作有據(jù)可循。
2.流量流向分析
及時發(fā)現(xiàn)網(wǎng)絡中服務器是否存在大量跨區(qū)域、跨網(wǎng)流量,減少網(wǎng)間結算成本,杜絕收支倒掛的現(xiàn)象發(fā)生。
3.熱點資源分析
可以有效評估CDN資源的引入是否達到預期的流量本網(wǎng)率指標要求,為CDN業(yè)務的持續(xù)優(yōu)化提供依據(jù)。
4.業(yè)務質量分析
通過建立質量分析模型,監(jiān)控熱點資源、熱點ICP及其分發(fā)網(wǎng)絡的質量狀態(tài),基于知識庫分析質差原因給出改進措施,有效保障服務質量。
5.CDN計費分析
支持針對單個IDC客戶實現(xiàn)95計費功能,提供95計費詳單查詢并生成95計費報表,大大提高了客戶的工作效率。