论无线测试数据的统一管理及应用
2020-01-14陈融洁
陈融洁
(中富通集团股份有限公司,福州 350003)
1 引言
随着移动通信网络的迅速升级和规模的不断扩大,各种业务种类越来越多,用户对网络覆盖、容量、质量方面也提出了更高的要求。网络的质量状况及服务品质的高低,也直接影响了用户对运营商的选择。因此运营商进行网络建设和优化,真正从质量及服务的角度提升网络品质,这对于业务竞争成败具有十分重要的意义。
人工测试/DT/CQT 做为一种网优手段,通过现场模拟用户行为的测试,最能反映用户的真实感受,同时,人工测试/DT/CQT 测试采集的数据又是网络评估、定位网络问题不可缺少的依据,在网络优化中具有举足轻重的作用。目前,海量的测试数据分散在不同的测试人员手中,数据得不到快速的利用,历史测试数据得不到统一的管理,导致测试数据资源的丢失和浪费;大范围的测试数据不能统一利用和分析,给网络问题的排查带来局限性。而如何科学地集中管理和利用路测数据,为网优工程师提供更便利、更全面的分析手段和决策层提供更充分的网优参考数据,是一大课题。
2 无线测试数据管理及应用的现状
随着移动通信领域市场竞争的日益激烈,网络优化变得越来越重要,尤其是通过对海量网优数据的采集和分析,使得大量繁琐的手工统计和局部优化分析都显得力不从心,无法满足日益庞大的网络架构下细微问题的综合累计。无线测试数据厂家众多,测试数据格式繁杂,无法进行统一分析,成为使每个测试数据成为一个个“数据孤岛”,数据利用率极低,对于网络管理工作造成许多不便。例如无法看到全网的网络测试情况,如果需要必须手动的对每个测试厂商的DT、CQT、人工测试情况进行汇总。
(1)数据收集及上载:多厂商的数据,不同的格式,数据量大,数据利用率低,无法形成合力。
(2)单机处理数据:多种前台厂商的软件平台,结果很难共享及整合,大数据量调用很困难。
(3)问题定位及制定方案:对分析人员的数量和技术水平要求高,难于对全局的情况进行合并分析。
(4)实施效果验证:全网的分析很困难,效果不明显。
(5)报告汇总:只能依靠上报的记录抽查验证,无法对数据直接核查,数据利用率低。
(6)管理层得到报告:周期长,不直观,整改后的反馈时间长。
(7)无法对用户投诉处理,提供有效的数据支撑。
3 无线测试数据统一管理和应用的难点及解决方案
(1)数据格式:不同厂家数据格式与平台的兼容。解决方案:设计统一、开放的数据接口。
(2)外部接口问题:与其他平台的鉴权问题,基础信息更新问题。
解决方案:统一的鉴权接口,统一的基础数据接口。
(3)海量数据的处理问题
解决方案:预定义数据查询处理,非关系型数据库集成,多服务器乃至服务器集群。
(4)管理人员与技术人员的不同视角,和对平台的不同期望
解决方案:提供BS+CS 架构,为管理人员提供对网络性能宏观视图的同时,也为技术人员提供网络性能微观问题的透析分析。
(5)系统未来扩展问题
解决方案:未来支持话单数据、告警信息、RSII 数据、邻区数据的多数据联合分析,准确定位问题,并形成网优专家库(智能网优),达到网优经验共享,提高解决问题的效率,节约网优成本。
4 无线测试数据统一管理及应用的目标
(1)共享的测试数据库和CQT 数据库,数据库采用集中方式,所有测试数据和CQT 数据全部集中存放。
(2)能够方便快捷地获取任意时间段内的无线网络的KPI 指标情况及变化趋势。
(3)能够及时地了解竞争对手的KPI 指标变化情况,为前端市场提供配套支持,做到有据可查。
(4)实现测试任务的电子化、规范化、快捷化、可视化。
(5)实现路测数据格式统一化,优化分析平台统一化,网优人员只需使用一套软件即可对所有不同设备厂家的测试数据进行分析和统计。
(6)实现测试数据的自动化分析、测试报告自动化生成统一的报表格式,测试人员只需上传测试数据,服务器即可自动生成定制好的报表,保证统计指标的准确性,排除人为因素的影响。
(7)实现网络分析的专题化,可快速地发现网络优化前后的变化情况,了解优化方案是否有效,从而指导网优人员调整优化方案。
(8)海量数据的深度分析,挖掘网络的隐藏问题,帮助优化人员快速发现和定位网络问题。
(9)实现海量的CQT 定点监测测试数据和手机终端测试数据采集与管理、为用户投诉处理提供有力数据支撑,可以辅助定位问题,帮助判断用户的投诉到底是网络问题还是终端原因引起的。
(10)实现同网优平台对接获取邻区信息、话统数据、硬件告警信息、RSII 信息,实现路测数据与邻区信息、话统数据、硬件告警信息、RSII 信息相结合的分析功能,准确定位问题点的发生的原因,方便网优人员给出优化方案。
(11)模拟专家分析系统,逐步向网络优化智能化发展。
5 无线测试数据统一管理及应用的建设设计思路
系统设计考虑到海量数据存储的要求,硬件配置上采用外部存储设备进行数据集中存储。在软件处理上,对数据进行压缩后再存储,同时建立目录索引,进行快速数据查找和提取。系统内部进行的数据传输,均采用压缩和加密技术,充分保证网络带宽的有效利用和数据安全性。
系统在数据处理上采用分层处理模式,同一数据不同层次的处理,实现互不干扰。在数据采集层,依照预定义处理流程,分别进行个性化分布式处理。系统采用预处理模型,所有对数据的处理过程均以预处理的形式发布在系统中,通过并行计算,系统做到同一数据,同时进行多种个性化处理,最大程度的缩短了数据处理时间。
系统包含WebGIS 服务平台,能够提供基于Web 应用的地理信息展示。系统预先处理数据将分析后的数据,直接生成空间数据存储在数据库中,用户在提取数据信息时,系统能提供高效的基于地图索引的数据查询手段。
系统设计中考虑到知识系统的要求,为数据深度挖掘与网优经验的结合而建立一个桥梁。通过系统一段时间的运行,做到根据统计数据提供网优经验,通过网优经验查找数据案例。实现系统长时间运行,网优长时间积累,从而最终建成一个网优专家库,为未来的网优工作提供最直接的技术支撑。
服务端有业务服务器进行计算,将相应分析数据存储在数据库中,因此用户在访问终端上可以根据自身需求进行数据分析,分析结果可以以表格方式和图表方式进行展现。
6 无线测试数据统一管理及应用的架构
依据无线测试数据统一管理的特点,系统应采用“集中+分布式”建设方案,由统一建设数据库服务器、文件服务器、应用服务器、地图服务器、Web 服务器,各级终端通过广域网(Internet)与系统连接。基于对数据的安全考虑,方案中只将应用服务器暴露在广域网中,文件服务器采用双网卡配置,分别接到内外两个网络。内网的各个服务器,通过交换机实现互联。各级终端通过配置相应路由接入系统,维护终端接入内网交换机,对系统进行维护。
具体网络图如下:
对于应用服务器端,系统可以平滑的扩充应用服务器,系统的容量,基本上是线形增长,另外,还可以扩充应用服务器的CPU 以及内存等自身的资源,使其处理能力加大;对于数据库服务器,系统可以由双机热备扩展到负载均衡模式,使数据库服务器处理能力成倍增加,另外也可以通过四层交换机的配置情况,实现硬件方式的负载均衡模式,从而使负载均衡方式能够平滑的升级系统数据库的扩容,另外,通过对磁盘阵列升级到光纤通道,能够使得数据库的访问速度大大提高。
7 总体功能架构
无线测试数据统一管理总体功能架构如下几个图示表示整个架构设计方案:
人工路测、自动路测平台、CQT 平台、手机测试平台、公交测试平台数据按照统一格式进行转换。
数据处理流程图
海量数据库分布式计算网络拓扑结构图
8 结束语
通过有效管理,科学利用无线数据,实时监测、评估、跟踪各个地区网络质量情况。通过数据管理平台海量级数据处理功能,实现多数据源的联合分析、通过海量历史数据的对比、挖掘帮助网优人员发现定位网络隐性问题的,通过不断的深入分析和建设,使无线测试管理平台最终成为具备智能网优的综合性大网优平台,可以极大提升网优工作成效。