应用性能管理方案

,单击此处编辑母版标题样式,单击此处编辑母版文本样式,第二级,第三级,第四级,第五级,2010/4/16,#,ProMATO 12+30,性能管理,1,性能管理,vs,系统管理,系统管理,网络管理,数据管理,打印管理,文件管理,知识管理,用户管理,版本管理,性能管理是系统管理中重要的一环,性能管理,-,系统管理的新趋势,性能管理,系统管理,2,性能管理概论,What :,性能管理管什么,?,Why :,为什么,需要,性能管理,?,When:,什么时候开始实施性能管理,?,Who :,由谁来执行性能管理,?,hoW :,如何进行性能管理,?,谁来保证升级的成功,如何进行瓶颈定位,升级改造后，还是慢！,如何预测方案的有效性？,多久可以改造完成,￥,?,?,?,性能管理,-,系统管理的新趋势,性能管理,系统管理,3,iT,信息化面临的挑战,系统越来越复杂，维护压力越来越重！,如何保证系统的稳定性？,买品牌、买双机、买备份、买容灾,数据越来越庞大，运行速度越来越慢！,如何保持高效能的运行,？,系统逐渐变慢！怎么办？,如何在系统安全稳定的前提下,保持高效能的运行！,系统运营维护,性能管理,系统管理,应用运行速度,ProMATO,性能管理,-,彻底解决系统运行的性能问题,4,逐渐变慢,vs.,优化改造,数据量和业务量不断的增加，性能逐渐变慢是一个必然的现象,运行缓慢的过程,感觉有点慢,越来越慢,慢到无法忍受,改善系统性能的步骤,找出性能瓶颈,实施软件调优,进行升级改造,优化改造过程中的困扰,不易找出系统瓶颈的真正原因,系统调优和软件修改，耗时费力及效果不彰,硬件升级改造后，改善的成效不如预期,瓶颈定位,系统调优,提速,-,三部曲,升级改造,ProMATO,性能管理,-,彻底解决系统运行的性能问题,5,瓶颈定位过程的困扰,供货厂商,(,服务器、存储、数据库,),、软件商、集成商各自评估,依据工程师个人的经验来判断，如何保证准确性,安装专业的性能管理软件、但是仍然找不出问题,运行缓慢的现象不好描述，无法量化,后台的,ERP,系统,有时总是很慢,甚至有数据库锁死现象，如何处理？,最近系统压力很大，,IO,等待一直严重，不知道如何办？,服務器經常非常慢，,cpu,负载經常達到,100%,，怎麼辦？,数据库应用经常慢,但一会儿又好了,如何监控,CPU,线程了,如何处理？,请帮忙看看,statspack,客户经常抱怨数据库慢，等待太久。,数据库变的很慢咋分析处理，尤其是在月结的高峰时段。,aix,系统,cpu,使用率高，如何解决？,瓶颈定位,系统调优,提速,-,三部曲,升级改造,ProMATO,性能管理,-,彻底解决系统运行的性能问题,6,软件调优过程的困扰,应用调优的不同方法,数据厂商：调整数据库参数和设定,软件厂商：修改软件,服务器厂商：升级操作系统，调整系统参数，打补丁,存储厂商：调整存储内部参数，升级,firmware,版本,耗时费力、效果不彰的困扰,不知道先调整那些参数是有效的,需要多次的调整、测试和改善比较,生产系统无法随便更改参数。,软件已经无法修改或二次开发了,上论坛看有没有热心的高手帮忙：,翻遍各种参考资料，但是不容易找到和自己完全相同的情况,瓶颈定位,系统调优,提速,-,三部曲,升级改造,ProMATO,性能管理,-,彻底解决系统运行的性能问题,7,升级改造方案面临的困扰,硬件的升级模式,服务器和存储的性能升级,增加,CPU,和内存的数量,更换更到规格的型号的主机、服务器,从单节点升级成为,RAC,的多节点的机群系统,把,PC,服务器换成,Unix,小型机,存储系统的升级,从,SCSI,盘阵升级到光纤盘阵，从,2Gb/s,升级到,4Gb/s,增加光纤盘阵的内存和主机接口数量,换更高,(,最高,),型号存储设备,升级改造面临的困扰,实施升级改造后，性能有点改善，但是不如预期的效果,哪个厂商升级改造方案的成本效益高,无法预测升级后的改善效果,瓶颈定位,系统调优,提速,-,三部曲,升级改造,ProMATO,性能管理,-,彻底解决系统运行的性能问题,8,应用,逐渐变慢,！升级效果不彰是缺乏性能管理的常见现象,更改软件,提高性能？,升级,主机,CPU,内存？,采用,更高速的盘阵？,优化,数据库的性能？,使用,更高速的硬盘？,更换,更大的服务器？,加大,盘阵上的缓存？,主要的瓶颈在那里？,如何优化和升级？,等待的慢,抱怨的慢,不知名的慢,无奈的慢,ProMATO,性能管理,-,彻底解决系统运行的性能问题,9,监控工具,vs,调优软件,vs,性能管理,性能监控工具,网管软件,: IBM tivoli, HP openview,系统监控工具,:SARnMONGlanceTopas,数据库监控,: Oracle Statspack.,存储监控软件,:EMCIBMHDS,专业性能监控软件,: BMC patrol,软件性能监控软件,: SAP earlywatch.,调优软件,:,Symantec I3, Quest Toad,HP Mercury,性能管理,ProMATO,性能管理工具,调优软件,压力测试软件,性能监控工具,性能评估软件,ProMATO,12+30-,建立应用性能模型,+,设定性能改善目标,+,预测性能增长趋势,10,存在性能问题的用户分析,全省、全国数据集中的用户,主要使用,IBM,HP,服务器,+EMC/HDS/IBM,的存储设备,保险,:,综合业务系统和报表统计系统,证券,:,风险控制系统,以地市为单位,使用的规模的较小，技术能力依赖性比较强,烟草、社保、地税：综合业务系统,ERP,和,SAP,的企业用户,如何彻底解决性能问题,!,数据量增长,高峰并发量,数据大集中,性能分配不均,ProMATO,12+30-,建立应用性能模型,+,设定性能改善目标,+,预测性能增长趋势,11,ProMATO,性能管理的目标,性能管理建设目标,提升运行效率、创造企业更高的生产效益,提高服务品质、增加用户更好的满意程度,善用现有资源、发挥设备最大的运行效率,ProMATO,性能管理的目标,管理应用的运行速度,定位性能瓶颈和隐患,预测系统性能增长趋势,预测升级改造改善效果,发挥资源最大负载能力,特点和优势,方法和步骤,性能管理目标,流程和内容,ProMATO,12+30-,建立应用性能模型,+,设定性能改善目标,+,预测性能增长趋势,12,ProMATO,性能管理服务流程,1.,建立应用系统性能模型,2.,定位存在的瓶颈和隐患,3.,现有资源负载性能评估,5.,分析性能需求增长趋势,6.,制定性能改善目标,7.,升级方案性能指标要求,4.,量化现有应用性能需求,8.,检测改造方案实际负载,9.,升级改造改善成效预测,10.,长期量化分析优化结果,ProMATO 1+7,性能瓶颈诊断,ProMATO 12+30,性能管理服务,特点和优势,方法和步骤,性能管理目标,流程和内容,ProMATO,12+30-,建立应用性能模型,+,设定性能改善目标,+,预测性能增长趋势,13,ProMATO,性能管理的特点和优势,多平台综合诊断,适用不同平台的各种操作系统、数据库和存储系统的性能评估,四维瓶颈定位,分析性能隐患、定位瓶颈和增长趋势预测,数据安全无忧,无需在生产系统安装任何软件，保证系统稳定性和数据安全性,定制化性能模型,结合实际的企业应用特点，定制化的性能量化评估,网络系统,应用软件,数据库,操作系统,服务器,存储设备,用户,用户,用户,用户,ProMATO,性能管理,特点和优势,方法和步骤,性能管理目标,流程和内容,ProMATO,12+30-,建立应用性能模型,+,设定性能改善目标,+,预测性能增长趋势,14,ProMATO,服务内容,特点和优势,方法和步骤,性能管理目标,流程和内容,ProMATO,12+30-,建立应用性能模型,+,设定性能改善目标,+,预测性能增长趋势,15,传统升级改造方案流程和步骤,第一阶段,用户需求：在原来的结构下，进行升级改造，提升性能,解决方案：升级改造的主要依据,新产品的性能指标,用户的预算,系统工程师的个人经验,第二阶段,方案评估、产品选型,新产品性能测试,产品采购,第三阶段,安装、调试、,等待上线使用，期待性能改善结果,改善明显,有点改善，但是,3,个月后又缓慢了,没有改善,比原来的系统还慢,性能指标,预算多寡,升级改造依据,压力测试,ProMATO,12+30-,建立应用性能模型,+,设定性能改善目标,+,预测性能增长趋势,16,ProMATO,提供的升级改造流程和步骤,ProMATO 1+7,性能评估服务,建立应用系统性能模型,瓶颈定位,(,那里慢、什么时候慢、有多慢,),ProMATO 12+30,性能管理服务,应用性能的需求分析,现有资源负载分析,应用性能的趋势分析,用户：,制定性能改善目标,依据性能改善目标评估改造方案：,现有现有瓶颈和隐患的改善,选型设备的性能指标要求,=,现有资源负载 * 性能改善目标 * 性能增长趋势,评估检测选型设备的负载承受能力,性能改善的结果的预测,确定改造方案和选型结果,安装调试,新设备的实际性能检测,ProMATO 12+30,优化过程的结果检测,瓶颈定位,应用性能需求,升级改造依据,性能增长趋势,ProMATO,12+30-,建立应用性能模型,+,设定性能改善目标,+,预测性能增长趋势,17,系统结构,System,：,Dell PE2950 two dual core,，,4GB mem,，,AX150i,OS &DB & AP,：,WS 2003R2/SQL server/IIS & .NET,Storage:,Internal: SAS 73GB, 10K RPM. RAID-1,External: AX150i (500GB SATA-II, 2D+2P+hot spare),iSCSI structure,Data Structure,：,建立性能模型,实施瓶颈定位,案例解析,设定改善目标,预测升级效果,ProMATO,12+30-,建立应用性能模型,+,设定性能改善目标,+,预测性能增长趋势,18,系统变慢后，面临的挑战,面临性能困扰：,2007,年,3,月正式上线，,2008,年,4,月用户开始抱怨网站速度太慢,2008,年,6,月进行软件升级,(,软件是自行开发的,),用户反映网页查询太慢,:,约超过,5-6,分钟以上,没有好的性能监控找出真正的瓶颈地方,新的多媒体应用即将再开通,升级改造方案一,升级原来存储的性能，增加内存和硬盘,增加交换机升级网络性能，将公用,IPSAN,的，更改成专有的网络结构。,升级改造方案二,升级高档的,iSCSI,盘阵,升级服务器的,CPU,和内存,升级改造方案三,由,iSCSI,盘阵升级到光纤盘阵，,IPSAN,改成,FCSAN,升级更高档的服务器,建立性能模型,实施瓶颈定位,案例解析,设定改善目标,预测升级效果,19,建立运行性能模型,由,ProMATO,管理软件来建立应用性能模型,解释应用的实际应用流程,模型类别,模型内容,System Load,busy,App.IO Request,tpsall,APP.Data Flow,tps,Device Load,tpsrw,Storage Load,Disk,建立性能模型,实施瓶颈定位,案例解析,设定改善目标,预测升级效果,20,应用运行模型,vs.,定位系统瓶颈,建立性能模型,实施瓶颈定位,案例解析,设定改善目标,预测升级效果,21,应用运行模型,vs.,定位系统瓶颈,建立性能模型,实施瓶颈定位,案例解析,设定改善目标,预测升级效果,22,应用运行模型,vs.,定位系统瓶颈,建立性能模型,实施瓶颈定位,案例解析,设定改善目标,预测升级效果,23,应用运行模型,vs.,定位系统瓶颈,建立性能模型,实施瓶颈定位,案例解析,设定改善目标,预测升级效果,24,系统性能瓶颈,vs.,制定性能目标,Heavy Period,2008-08-25 10:00- 17:00, total 420 Min.,Most Heavy Period: 10:37-11:26,Continuing %act 90% ,about 50Min.,Range,Operation,Min.,Ratio,0-60%,Normal,122,29%,61-80%,Busy,107,25%,81-90%,Heavy,44,10%,91-100%,Halt,147,35%,建立性能模型,实施瓶颈定位,案例解析,设定改善目标,预测升级效果,25,ProMATO,的性能管理服务,制定性能改善目标,评估现有,AX150i(5,个硬盘,),的实际性能负载力,解析应用的实际,I/O,性能需求,评测,AX150i(12,个硬盘,),的实际性能负载力,预测实际应用的的需求趋势,预测应用需要的性能指标,升级改造方案的有效性评估和预测,建立性能模型,实施瓶颈定位,案例解析,设定改善目标,预测升级效果,26,升级改造的评估依据,目前共,IBM P,系列小型机共八台，每两台的布署为双机热备系统对外提供服务，由于业务量的增加，系统存在逐渐变慢的情形，甚至在高峰期的时间段，系统有运行缓慢的现象。,希望进行系统和合理化部署，以缓解业务量不平均的现象,希望实施升级改造，解决系统逐渐变慢的困扰,27,升级改造的评估困扰,升级改造方案一,服务器全部更换为,P570,，升级,CPU,，升级内存,盘阵全部更换为,DS4800,升级方案二,数据大集中，使用,EMC,高端存储设备，共享存储资源,28,ProMATO,进行评估分析,29,ProMATO,评估分析,ORACLE,环境,Oracle Database 10g Enterprise Edition Release 10.2.0.3.0 - 64bit Production With the Partitioning,Real Application Clusters, OLAP and Data Mining options,主机配置（两台,HP6600,）,数据库应用服务器，型号,RX6600,，,2,台，,单台：,433000TPCC,，,8,个,Itanium 1.4GHz CPU,（每个,CPU,含,1,个内核），,32GB,内存，,2,个,146GB,硬盘,2,个,FC 4Gb,类型盘阵接口，,1,个,DVD,光驱，,HP-UX 11iV2, Serviceguard CFS for RAC, RAID1,1,个机柜,磁盘阵列,型号,EVA6100,，,2,台，单台：实配裸盘容量,33600GB,，实配容量,33TB,，,112,个,300GB,硬盘,cache,容量,4GB,，,4,个,FC 4Gb,类型端口，,1,个机柜。,运行缓慢描述,装载的类型为业务话单，话单量每天在,5,亿条，,对事实表进行了按天的分区和子分区，目前装载的速度仅仅达到,2700,条,/,秒,性能改善目标,有什么办法可以提高装载的效率，可以达到每秒,2W,条以上,30,性能管理结论,性能管理管什么,?,为什么需要性能管理,?,什么时候开始实施性能管理,?,由谁来执行性能管理,?,如何进行性能管理,?,31,