数据业务质量端到端优化43张课件

移动业务质量端到端优化经移动业务质量端到端优化经验交流验交流中国联通山东省分公司中国联通山东省分公司中国联通山东省分公司中国联通山东省分公司2019 2019 2019 2019 年年年年 7 7 7 7 月月月月移动业务质量端到端优化经验交流中国联通山东省分公司1中国联通山东省分公司中国联通山东省分公司目目 录录端到端优化展望端到端优化展望123端到端优化成果端到端优化成果项目概述项目概述目 录端到端优化展望123端到端优化成果项目概述中国联通山东省分公司中国联通山东省分公司端到端优化理念端到端优化理念终端业务网和SP核心网无线网Service Service NetworkNetworkMMSBTSNodeBBSCRNCIP CoreIP CoreGGSNSGSNDNSWAP GWBackhaulBackhaulGb/IuGn/GpGiGw用户业务WAP彩信流媒体可视电话FTP工作目标工作目标端到端全程分析解决影响用户感知的业务质量问题端到端全程分析解决影响用户感知的业务质量问题用户、终端、无线网、核心网、业务网、业务用户、终端、无线网、核心网、业务网、业务涉及范围涉及范围相关部门相关部门分组域业务、电路域业务分组域业务、电路域业务业务形式业务形式网优、网管、市场、销售、产创、客服、终端网优、网管、市场、销售、产创、客服、终端端到端优化理念终端业务网和SP核心网无线网Service N3中国联通山东省分公司中国联通山东省分公司山东联通端到端优化项目组织山东联通端到端优化项目组织以以3G3G典型业务为主，创新性地研究端到端优化的方法论，全过程分析影响业务典型业务为主，创新性地研究端到端优化的方法论，全过程分析影响业务质量的因素，掌握不同终端在提供各类业务时的差异，初步建立业务质量评价质量的因素，掌握不同终端在提供各类业务时的差异，初步建立业务质量评价体系，从核心网、无线网、业务平台、终端等方面进行优化，改善用户感知，体系，从核心网、无线网、业务平台、终端等方面进行优化，改善用户感知，为为3G3G经营服务工作提供更好的支撑。经营服务工作提供更好的支撑。省公司网优中心统一组织，对全省核心网分组域设备进行专项优化，同时与华省公司网优中心统一组织，对全省核心网分组域设备进行专项优化，同时与华为公司组成联合课题组，以济南为试点，对为公司组成联合课题组，以济南为试点，对iPhoneiPhone、N85N85等主流终端在承载等主流终端在承载WAPWAP、流媒体等、流媒体等3G3G特色业务时的性能表现进行端到端优化，并根据优化分析结论协特色业务时的性能表现进行端到端优化，并根据优化分析结论协同销售、产创、客服等部门改进同销售、产创、客服等部门改进3G3G经营服务工作。经营服务工作。20092009年年1111月月-2019-2019年年6 6月。月。项目目标项目目标组织方式组织方式项目历时项目历时山东联通端到端优化项目组织以3G典型业务为主，创新性地研究端4中国联通山东省分公司中国联通山东省分公司优化成果优化成果u建立基于用户感知的建立基于用户感知的QoE/KQI/KPIQoE/KQI/KPI指标评价体系指标评价体系u初步形成业务质量端到端优化的方法论初步形成业务质量端到端优化的方法论搭建端到端优化环境，明确了工具部署、问题定界、分析流程和优化方法。u解决影响用户感知的业务质量问题解决影响用户感知的业务质量问题解决WAP、彩信、可视电话、流媒体、FTP等5种典型业务质量问题，进行iPhone专题分析优化，积累了手机上网、彩信成功率低、FTP断流等40多个端到端分析优化案例。u分组域分组域KPIKPI指标得到提升指标得到提升InterRAU成功率、PDP激活成功率。u经营服务支撑经营服务支撑基于业务质量优化成果，对销售部、产创部提出建议，支撑精确营销。优化成果建立基于用户感知的QoE/KQI/KPI指标评价体系中国联通山东省分公司中国联通山东省分公司2端到端优化成果端到端优化成果 指标体系指标体系 端到端优化方法论端到端优化方法论 业务质量优化业务质量优化 PS KPI指标优化指标优化 经营服务支撑经营服务支撑2端到端优化成果 指标体系6中国联通山东省分公司中国联通山东省分公司用户感知指标体系组成用户感知指标体系组成关键性能指标关键性能指标(KPI(KPI，Key Performance Indicator)Key Performance Indicator)，TMFTMF标准：标准：GB923GB923。主要是。主要是基于网络层面对网元设备的性能描述，由一组可监测可度量的参数构成，是运基于网络层面对网元设备的性能描述，由一组可监测可度量的参数构成，是运营商对网络进行测量管理的重要方法，例如营商对网络进行测量管理的重要方法，例如PDPPDP激活成功率、掉话率等。激活成功率、掉话率等。关键质量指标关键质量指标(KQl(KQl，Key Quality Indicator)Key Quality Indicator)，TMFTMF标准：标准：GB923GB923。站在用户视。站在用户视角，在业务层面反映用户感受的指标，包括在业务流程中直接测试得到的指标角，在业务层面反映用户感受的指标，包括在业务流程中直接测试得到的指标（如：首页显示时延），以及通过统计分析或者（如：首页显示时延），以及通过统计分析或者KPIKPI计算得到的指标（例如计算得到的指标（例如WAPWAP上网成功率）。上网成功率）。用户体验质量用户体验质量(QoE(QoE，Quality of Experience)Quality of Experience)，ITUITUT P10/G100T P10/G100。与传统的。与传统的QoSQoS不同，不同，QoEQoE与具体业务相关联，从用户的角度提供业务主观感知评价。与具体业务相关联，从用户的角度提供业务主观感知评价。QoEQoEKQIKQIKPIKPI用户感知指标体系组成关键性能指标(KPI，Key Perfo7中国联通山东省分公司中国联通山东省分公司用户体验用户体验QoE/QoE/业务业务KQI/KQI/网络网络KPIKPI层级层级Node BRNCMSC/MGW用户QoE用户感受层面用户感受层面用户感受层面用户感受层面业务应用层面业务应用层面业务应用层面业务应用层面网络性能层面网络性能层面网络性能层面网络性能层面业务KQI业务KQI网络KPI网络KPI网络KPI核心网 KPI承载/传输KPI核心网KPI无线KPI用户对业务品质的QoE感知度和认可度承载网的业务承载能力水平运营商提供的业务品质KQI业务业务KQI标准标准网络网络KPI标准标准用户用户QoE标准标准MSC/MGWNode BRNCIP NetworkIP Network基线基线基线基线安全安全阀值阀值安全安全阀值阀值用户用户分级分级用户体验QoE/业务KQI/网络KPI层级Node BRNC8中国联通山东省分公司中国联通山东省分公司QoE-KQIQoE-KQI指标指标QoE-QoE-测评测评KQIKQI指标指标KPIKPI指标指标KQI/KPIKQI/KPI数据来数据来源源KQIKQI指指标标QoEQoE权重权重测评测评KQIKQI指标指标名称名称QoEQoE测评测评KQIKQI权重权重QoEQoE测评测评KQI KQI 映射映射测评测评KQIKQI现现状状KPIKPI指标指标KPIKPI值值首页接入成功3.385%首页接入成功率（）3.00 40%5,99%4,95%3,80%2,70%1,70%85.52%覆盖率98.00%DT测试RAB建立成功率98.00%RNC话统(SGSN级汇总)附着成功率94.55%SGSN话统PDP激活成功率98.89%SGSN话统connect成功率99.76%SQMget成功率95.47%SQMCQT首页接入成功率（）4.00 30%5,99.9%4,98%3,90%2,80%1,80%98%鼎利测试每万用户WAP接入成功投诉次数3.00 30%5,04,23,82,201,-10dB时开始选择3G网络；在其它手机能从2G重选回3G网络时，iPhone手机RSCP为-89.33dBm，Ec/Io在-12dB左右，接收灵敏度比不同终端均值差4dB，低于重选门限，无法返回3G网络。iPhone手机接收灵敏度低，比其它终端更容易启动3G向2G的切换。iPhone 2G/3GiPhone 2G/3G互操作问题互操作问题iPhone:iPhone:-89.33-89.33均值均值:-85.39:-85.39问题描述：iPhone:重选时长49S测试分析：iPhon中国联通山东省分公司中国联通山东省分公司iPhone 2G/3GiPhone 2G/3G互操作问题互操作问题优化效果：优化效果：iPhone更容易由2G向3G重选，并且更多地驻留在3G网络，3G业务覆盖边缘向外延伸了约300米，改善了用户网络体验。以实验局为例，忙时2/3G异系统切换次数由1000次降到200次左右，切换成功率统计指标受其影响由97.3%下降到96%。需要以小区为单位细化2/3G互操作参数，把握好用户感知和KPI指标的均衡。3G 3G 2G2G切换切换参数参数RSCP(dBm)RSCP(dBm)Ec/Io(dB)Ec/Io(dB)优化前优化前优化后优化后优化前优化前优化后优化后启动压缩模式测量门限-95-113-14-24停止压缩模式测量门限-92-110-12-24优化措施：优化措施：调整2G重选3G门限1个步长，将5改成7（3G网络Ec/No-12dB时开始选择3G网络），使iPhone手机能及时重选回3G网络。修改3G2G CS业务异系统切换门限，使3G业务更多地由3G网络来承载。2G 2G 3G3G重选参数重选参数原值原值新值新值FDD小区重选Ec/No最小门限57iPhone 2G/3G互操作问题优化效果：3G 2G切换27中国联通山东省分公司中国联通山东省分公司问题描述：问题描述：iPhone手机登录优酷网站点播流媒体业务，初始缓存时延很大，最长33秒，最小18秒，影响用户感受。原因分析：原因分析：承载方式差异：联通门户网站流媒体通过UDP方式承载，速度快；优酷网站视频基于TCP承载，速度慢。播放器差异：iPhone自带视频播放器不适合播放youku等国内网站上的视频文件，播放性能不足。优化措施：优化措施：推荐用户通过联通门户观看流媒体。观看优酷网站，要安装AppStore中免费的优酷客户端软件。优化效果：优化效果：安装优酷客户端软件后，初始时延58秒，播放流畅。iPhoneiPhone流媒体问题流媒体问题问题描述：优化措施：iPhone流媒体问题中国联通山东省分公司中国联通山东省分公司3G3G典型业务优化成效典型业务优化成效投诉下降投诉下降时间时间3G3G业务投诉次数业务投诉次数3G3G用户数用户数3G3G数据投诉率数据投诉率09年12月19433064.4 10年1月24526794.6 10年2月18582353.1 10年3月18647592.8 10年4月13698731.9 优化效果：优化效果：通过以上专题优化，济南3G数据业务质量投诉次数从1月份的24次降到4月份的13次；每万用户投诉率从4.4次降为1.9次，改善幅度达57.6%。3G3G数据业务投诉分类：数据业务投诉分类：手机上网38%、手机报30%，无线上网卡17%。小结数据来源：客服中心3G典型业务优化成效投诉下降时间3G业务投诉次数3G用户数29中国联通山东省分公司中国联通山东省分公司2端到端优化成果端到端优化成果 指标体系指标体系 端到端优化方法论端到端优化方法论 业务质量优化业务质量优化 PS KPI指标优化指标优化 经营服务支撑经营服务支撑2端到端优化成果 指标体系中国联通山东省分公司中国联通山东省分公司PDPPDP激活成功率激活成功率问题描述：问题描述：某地市SGSN忙时PDP激活成功率（包含用户原因）偏低，只有85%。评估分析：评估分析：1、话统分析：96%的失败原因值是“GPRS服务不允许”，即有些用户没有开通GPRS却不断尝试上网；2、数据核查：发现HLR用户签约数据中部分用户“网络接入模式”参数设置有问题，使得未开通GPRS业务的用户也能发起PDP激活，但是激活失败。优化措施：优化措施：修改HLR中的用户签约数据，把NAM参数从Both改成MSC，只有GPRS签约用户才能允许发起PDP激活请求。优化效果：优化效果：该地市SGSN的PDP激活成功率提高了15.5%，达到99.6%。PDP激活成功率问题描述：优化措施：中国联通山东省分公司中国联通山东省分公司InterRAUInterRAU成功率成功率问题描述问题描述:忙时Inter RAU(跨SGSN路由区更新)成功率较低，只有56%（排除非网络原因）。评估分析：评估分析：1、“网络无法获取用户身份”是导致InterRAU失败的主要原因，占所有失败原因的84%；2、通过分析系统日志发现：导致“网络无法获取用户身份”的原因为“DNS响应消息错误”，即当终端发生InterRAU流程时，DNS-SERVER上的数据与无线侧RAI数据不一致，导致上报给新SGSN的路由区信息无法在DNS正确解析，致使Inter RAU流程失败。InterRAU成功率问题描述:评估分析：中国联通山东省分公司中国联通山东省分公司InterRAUInterRAU成功率成功率优化措施：优化措施：修改DNS服务器数据，与无线侧路由区、SGSN IP地址等数据进行同步。优化效果：优化效果：济南局点InterRAU指标的成功率提升13.9%（优化前：56.9%，优化后：70.8%）后续改进：后续改进：进一步规范数据修改流程，保证核心网、无线网数据同步一致。优化前优化前优化后优化后InterRAU成功率优化措施：后续改进：优化前优化后中国联通山东省分公司中国联通山东省分公司2端到端优化成果端到端优化成果 指标体系指标体系 端到端优化方法论端到端优化方法论 业务质量优化业务质量优化 PS KPI指标优化指标优化 经营服务支撑经营服务支撑2端到端优化成果 指标体系中国联通山东省分公司中国联通山东省分公司终端性能差异性测试终端性能差异性测试测试四种主流智能手机WAP平均首页显示时延为17.46秒，其中HTC G2手机时延最小，为13.8秒；Dopod S610时延最长，为23.30秒；Nokia N85 为16.31秒；iPhone 3GS为15.4秒。除iPhone将APN设为3GNET外，其它各种手机必须将APN设置成3GWAP，才能访问联通集团门户网站wo。手机将APN设置为3GWAP可以降低首页显示时延，提升用户感知。例如多普达S610手机APN设置成3GNET的时延是3GWAP的4.97倍。终端性能差异性测试测试四种主流智能手机WAP平均首页显示时延中国联通山东省分公司中国联通山东省分公司端到端业务性能库端到端业务性能库通过对不同终端、不同业务进行组合测试，建立端到端业务性能库。有利于终端部门规范终端定制。有利于市场部门终端选型和业务适配。有利于客服部门处理业务咨询和投诉。有利于网优中心定位诊断网络质量问题端到端业务性能库端到端业务性能库序序号号手机手机类型型操作系操作系统类型型3GWAP3GWAP时延延(S)(S)3GNET3GNET时延延(S)(S)彩信点到彩信点到点成功率点成功率流媒体流媒体缓冲冲时延延-优酷网站酷网站(S)(S)流媒体流媒体缓冲冲时延延-沃沃门户(S(S）可可视电话VMOSVMOS质量量1 1Nokia N85Nokia N85Symbian 9.3,Symbian 9.3,Series 60Series 60第第3 3版版12.01 12.01 22.04 22.04 100%100%9.89.88.88.84 42 2多普达多普达 S610S610WindowsMobile WindowsMobile 6.16.111.58 11.58 38.93 38.93 100%100%12.512.511114 43 3HTC G2HTC G2AndroidAndroid6.75 6.75 23.21 23.21 100%100%8.98.97.67.64 44 4iPhone iPhone 3GS3GSiPhoneiPhone-15.40 15.40 100%100%26.426.48 8-端到端业务性能库通过对不同终端、不同业务进行组合测试，建立端中国联通山东省分公司中国联通山东省分公司用户用户使用偏好识别使用偏好识别SPSP业务业务数量数量占比占比qqqq聊天聊天8250582825058258.34%58.34%blovestormblovestorm来来电查询1908382190838213.49%13.49%浏览112778011277807.97%7.97%ruyiruyi浏览3991493991492.82%2.82%kongkong免免费手机手机WAPWAP网站网站3768933768932.66%2.66%sinasina浏览3046573046572.15%2.15%wowo浏览2453802453801.74%1.74%浏览2448332448331.73%1.73%renrenrenren社交网社交网络1741501741501.23%1.23%googlegoogle搜索搜索1673321673321.18%1.18%SPSP业务分析：业务分析：通过对业务量排名，发现用户主要访问腾讯、蓝色风暴、百度、如意等网站，表明用户主要喜欢聊天、游戏、搜索等应用。用户使用偏好识别SP业务数量占比qq聊天825058258.中国联通山东省分公司中国联通山东省分公司为精确营销提供支持为精确营销提供支持通过网络分析，找出未开通GPRS业务，但是多次尝试使用手机上网而不成功的用户，作为数据业务的潜在用户提供给市场部门。由销售部主动进行电话和短信回访，进行一对一精确营销，不断挖掘市场潜力，提高服务水平。TOP10TOP10用户用户发送次数发送次数8613176590*5038613287897*4838613012723*2968613287078*2538615553315*2388613287097*2048613287085*1968613053368*1778613173296*1738613173262*116为精确营销提供支持通过网络分析，找出未开通GPRS业务，但是中国联通山东省分公司中国联通山东省分公司经营服务跟进措施经营服务跟进措施改进方面改进方面详细描述详细描述责任部门责任部门后续措施后续措施清理无效用户彩信沉默用户占据网络资源，定期识别和清除，能够释放网络资源，增加有效用户的使用体验产创部山东联通接入了多家本地手机报SP，网优中心已经和产创部明确定期识别、清理沉默用户彩信自动纠错现网3GWEB网关缺少彩信自动纠错功能（通过识别，纠正终端错误设置的彩信中心地址）产创部产创部已经得到厂商响应，答复尽快实现该功能流媒体不同网站流媒体传送方式及播放器插件影响流媒体播放质量销售部根据网优中心对不同终端、不同主流网站的测试结果，向用户推荐最佳插件，提高流媒体业务质量PDP激活成功率低未签约GPRS业务用户尝试上网，这些用户都是潜在数据业务用户销售部针对未开通GPRS业务，但是多次尝试使用手机上网而不成功的用户，由销售部主动进行电话和短信回访，扩大数据业务市场渗透率端到端业务性能库对不同终端、不同业务进行测试分析，建立终端-业务性能对比数据库销售部/客服中心/终端部门市场部门作为终端选型和业务适配的参考，向终端厂商提出定制需求，客服人员以此为参考提高处理用户咨询和投诉的能力经营服务跟进措施改进方面详细描述责任部门后续措施清理无效用户39中国联通山东省分公司中国联通山东省分公司目目 录录端到端优化展望端到端优化展望123端到端优化成果端到端优化成果项目概述项目概述目 录端到端优化展望123端到端优化成果项目概述40中国联通山东省分公司中国联通山东省分公司后续工作展望后续工作展望u推广端到端课题优化成果，结合无线网优，进一步完善推广端到端课题优化成果，结合无线网优，进一步完善优化方法论，扩大终端和业务分析范围，逐步将端到端优化方法论，扩大终端和业务分析范围，逐步将端到端优化工作日常化，长期深入开展下去；优化工作日常化，长期深入开展下去；u完善用户感知指标体系，提高网络设备指标设定和提取完善用户感知指标体系，提高网络设备指标设定和提取分析能力，加强对端到端业务质量的管理；分析能力，加强对端到端业务质量的管理；u建立前后台、多部门联合优化工作机制，网优中心协调建立前后台、多部门联合优化工作机制，网优中心协调相关经营服务部门不断提升业务质量，挖掘市场潜力；相关经营服务部门不断提升业务质量，挖掘市场潜力；u结合联通集团信令采集平台，与终端、工具、设备厂家结合联通集团信令采集平台，与终端、工具、设备厂家进行更紧密的合作，完善端到端优化环境。进行更紧密的合作，完善端到端优化环境。后续工作展望推广端到端课题优化成果，结合无线网优，进一步完善中国联通山东省分公司中国联通山东省分公司谢谢 谢！谢！42谢 谢！42谢谢谢谢43