系统运行管理方案

系统运行管理方案1.1监控管理监控管理主要是通过对被管对象的配置数据、性能数据、告警数据的统一采集,实现对IT基础设施、应用软件以及业务的监控,主动发现被管对象当前的故障或告警信息并进行处理,保障xxxxIT系统的稳定运营。1.1.1 IT基础设施监控IT基础设施监控是指对xxxx所有主机、数据库、中间件、网络、存储、备份等设备及软件进行统一监控,及时发现平台类的告警。1.1.1.1统一采集与控制根据xxxx移动核心系统运维监控管理平台技相关的要求,本期IT基础设施监控数据采集的范围包括各种设备的告警、性能、配置数据。采集范围包括但不限于：IT基础设施监控的管理范围包括xxxx所有生产环境的IT基础设施,包括但不限于以下IT 基础设施对象：支持类型主机IBMHPSUNPC Server(Windows/Linux)数据库OracleSybaseDB2SQLServerInfomixMySql存储EMCIBMSUNHPHDS网络设备思科华为北电等防火墙fortigate思科netscreen 等中间件等WeblogicTuxedowebsphereTomcatBES备份veritas 等本系统提供的采集代理主要包括:主机设备监控代理、数据库库监控代理、中间件监控代理、网络设备监控代理、日志监控代理、存储、备份采集代理。主机设备采集代理：主要通过shell、操作系统命令对主机的性能信息、配置信息、告警信息进行采集。如CPU使用率、内存使用率、SWAP交换分区使用率、文件系统使用率、磁盘IO等性能信息；主机名、地址、型号、CPU信息、内存信息、操作系统版本、逻辑卷、内置盘等信息；主机状态、主机内置盘状态、主机网卡状态、主机Cluster状态、关键进程状态等故障信息；数据库采集代理：主要通过SQL对数据库的字典和视图的查询封装,查看数据库相关的配置信息、性能信息、告警信息采集。配置信息主要包括：数据库名、版本信息、归档方式、共享内存大小、表空间大小、数据文件或设备名等信息。性能信息主要包括：共享内存使用率、数据缓存读命中率、表空间使用率、表空间读写次数、数据文件读写次数、数据库锁数量、数据库用户会话数等。告警信息主要包括：数据库状态、表空间状态、死锁等故障信息。中间件采集代理：中间件的类型主要但不限于WEBLOGIC TOMCATWEBSPHERE TUXEDO BES 等。主要通过JMX 对 WEBLOGIC TOMCAT PMI 对WEBSPHERE TUXEDO自带管理命令对TUXEDO进行监控,通过探测对TUXEDO服务的可用性进行监控。网络设备采集代理：主要通过SNMP协议轮询、TRAP两种方式采集网络设备（路由器、交换机、防火墙等）的配置、性能、告警信息。SNMP轮询方式：通过SNMP轮询方式,周期性的轮询相关MIB信息（包括公有MIB信息和厂商私有MIB信息）,获得相应的配置数据、性能数据。SNMP Trap方式：通过监听SNMPTrap端,实时接收来自于网络设备的Trap消息,经过消息预处理后,生成告警数据。配置数据主要包括设备型号、设备 CPU 大小、设备内存大小、设备缓存大小、IP地址等信息；性能数据主要包括设备CPU利用率、设备内存利用率、设备缓存利用率、端误码率、端丢包率等；告警信息主要包括网元状态、设备端状态、网络链路状态、域名解析服务、NTP服务状态、IP地址重复等故障信息。日志监控代理：主要通过对日志文件的关键字进行全量或者增量的检索,当发现异常关键字时,及时产生信息点,通过分析处理,产生告警,及时通知用户。存储设备采集代理：对存储设备进行配置、性能、告警数据的采集。配置信息：存储阵列标识、类型、容量、RAID方式、磁盘、主机通道卡、磁盘适配卡等信息；性能信息主要包括：磁盘IO速率、LUN的IO速率、磁盘IO读写频率、LUN的IO读写频率、CACHE读命中率、CACHE写命中率等；告警信息主要包括存储阵列状态、硬盘物理状态、硬盘逻辑状态、存储CACHE状态、磁盘适配卡状态、主机通道卡状态等故障告警信息。备份设备采集代理：主要采集设备CPU大小、设备内存大小、介质（池）空间大小、备份服务进程状态、备份结果、磁带库设备机械状态、备份CPU占用率、备份内存占用率、介质（池）的剩余空间、磁头距最近一次清洗时间等。1.1.1.2数据采集中何H采槃根财H志采地相松图：运维监控管理平台数据采集原理我珀 lui信息点采集模板界面化配置根据监控对象可灵活配置改对象需要监控的信息点、采集频率等信息,并支持模板的远程下发、更新。采集代理远程下发、启停与集中监控可在下发采集模板时同步下发采集代理并进行友好的下发过程的可视化能力,下发后可自动启动采集代理。提供集中的采集设备监控代理运行监控界面,便于维护人员实时监测各个代理的运行情况,并提供便捷的重启、模板和代理程序更新功能。二1百hMdZ：寸if铸胸娇! |i邸王四为-:jBtt 0ff ijlKft王帕ai -柚*王MW尚此向IWSiSWiJtTilA日担 1nw目王Ifl芯间N :之成王Tl1 驻 ERIE*SD fMl富8王1芸1耳哦貌雁配岂机4审1旧场肺由H 3曲计辨新q；卑心破评曜C1.角.1UA,UM4 I&中1脚沽胃的|!1|1皂耳1庵疫敏弟:晚照的H,nww-lflKU HF-LHK H41ilL+!g 在用王 H,1：125 119 4S 13-13-ISHiE II4El ?JEWHP-UiK计 Sftfl-lrtH.JjWfciSy/IE 王 Rm UE-.iiifia2U-43-Z2tt:ia：4lQU ,正霍m Liu 膝碧耳王凤H1M3-220HD t,睡更丑山十缺王点Mi322l4：!a：M0ftDuSTHF-LHK雷 H4UL+qtl 主 H,IS13E HEES3C13-13-13 H:iaai0Kl nhP-LMIXrg|EK三牝.1 卖 京 4 1 ：!：,113JS9JIJ13 1143-1： MhlUH0KDu偶刖甲汗欢闲王Jlr1就1着i：M小独村WHDurfUHK叶费麻新*；wn中养务wm 王ite22tat.l7H1243.22HXiT：E5LH HHTHF-LHK辛菱中计写豆用主制n_iyTmisEm 由S 13-13-13 HIS 131ElHT清侦。：L+flSlW；* :中町王102工132 13E3EK33C13-13-12 H CE 21XKl,1储正霍mFE&lAEL用王时* |照221凯削州 H122aH 1?i*佃件-JW中】十欢用王0li uSTHF-LHK 中L+jflBK王距1古0I3213E7U9T3C13-13-13 HEIDIS0Kl itEXL+fl#lW；骨中l+!b胶ibk王I3213E3E353C13-13-12 KIQIC1Kl叶舟麻务甲郭条5!11犀王？1打4llH1M1-22IWB52H图：采集代理监控采集代理组件化封装根据不同的监控对象和采集方式的差异化,对目前的监控代理进行组件化封装：主机设备监控代理数据库库监控代理中间件监控代理网络设备监控代理 日志监控代理存储设备监控代理备份设备监控代理n .吒.1:.=盐田.：事行报加】ijJ*l二I日WI巍据耳应用主机I田二j那故首襄数籽阵主机田二枷旨理关夏主机田】世=咆用眼骨舞田_i却数素库.服的快国|5咨.餐库.胴扭驰uj代盘布薮抵库.18.疆咨田_|gniM用JB.寿兽田二I代sffra孩推库.桐.务斟田二蹄是宣向技田如主机ij| Q wlrda-Aifih m M住扰iJ二具戒孔也曲机测国H=1林库:St中I同桦1存饨十二1鲁防I 2J业法at 成明夜蜓下我成的斗.存号 名称撩作.疫妙市后含理序精径1 3 ans-ioIIOXEca.aEniEBr.aflenb5jnPaitarmfl-r-j,H.,Dn：0rAofr,；.jar:.,ige：sunosjem：技M41GXBSmH.液E佩&5idH 0.55Eunas_ceiTaM.KKI1CX3SMK： 跪切13：靛mM.：啦E佩B6idH DiBS_EdnaE_EemslaM.KBDfl D-SMflO&JWTU .KSunOS_tsnEJ：e.x| 指 原占列新5ino$_iwfeite.jisiexasMUQXBi鲤宓起!8 线竺图：模板下发日志可追溯图：采集代理集中管控1.1.1.3告警处理告警处理是针对来自IT基础设施的告警信息进行统一处理,以便快速确认故障,缩短排障时间,为及时恢复系统运行打下良好基础。包括：告警定位、告警过滤、重复告警压缩、告警信息丰富、告警前转、告警操作等。告警定位告警定位是通过对告警信息的查看确定故障可能发生的位置。【主要功能】告警故障定位应与被管对象和被管对象关联关系相结合,应能建立告警列表展示信息中相关元素和被管对象之间的关系。对于一个告警,可根据这个关系自动确认发生告警的被管对象,进而查看与被管对象关联的其它对象情况。可以对被管对象的最小粒度进行定位,如应用资源和关键业务点。穿誓.姓时同匝岫1目蛭JMg医矗:部客24*137二W99篥一湖月20 2.qiu审素革里：2+4L37_-999S2032-123-20 L+：54.(62D32-O3-20 L+：54：Mflww.rCPLuMUSWiHH十as 丈于 1!)Z032-CI3-L9 IBlSHMau2-aa-L5 isiso-wbill_-1的CPU使用率为:EF超过细骚,产生重要皆告警清除告警批量确认故障单修改阀订阅规详细信3告害清除两页对话霍图：告警清除根据系统告警已发生时长、告警发生次数方面发生的变化,重新调整告警级别,保证根据正确的告警系统处理的正确性。图：告警升级1.1.1.4性能处理性能数据计算与汇总对预处理后的数据进行必要的计算、汇总形成所需的性能指标。处理后的性能数据保存到数据库中,供分析和呈现使用,性能数据的保留时间可配置。针对部分不需要保留较长时间的性能数据,在统计汇总后,可将历史数据进行清理,减少系统对存储空间的浪费。（批注：与技术规范预处理完成后的数据的保留时间,应该根据不同的数据类型进行区分要求呼应起来）I日1旨丘：丹,网Fl同旧IMI讥引白网卒IER图：指标计算规则性能数据阀值预警性能数据反映了系统及应用的运行状况,是判别被管资源运行是否正常的关键数据。性能数据一旦超出预先设定的阀值时,可及时触发性能阀值越限告警,该告警称为性能阀值告警。提供基于应用系统性能指标趋势数据的分析处理功能,实现性能预警,并为分析优化工作提供必要的依据。提供设定、查询、修改、删除性能阀值的工具,针对统一性能指标,可设多个阀值进行分级告警。性能阀值告警的内容应能比较全面地描述该性能数据超出阀值的情况,方便分析、排除事件。图：性能数据阀值预警 性能数据梯度预警系统提供梯度告警的功能,也就是两个时间点的性能数据差值如果超过了门限,则应该上报告警。这种告警不同于性能数据的阀值告警,性能数据的阀值告警只是对一个时间点上的性能数据设定了门限,而梯度告警则是对两个时间点的性能数据的差值设定了门限。梯度告警能够迅速发现性能数据的异常变化。隹席处可；-1 DQ(10BXQSI.Q卜毗计黔51T5J7OLCBI* i：i：iK197：砌伽。平费KI W CflD5E3E9JE2KCQ M戏*3OI3-P9-M IB W 顷USES林比凭蚣2550Z3503013-M-24USKEM.S7哗KffU啊1M龄55.57平普图：性能数据梯度预警性能数据汇总统计为了性能数据分析和呈现,以及事件的分析,系统应能定期生成统计数据。通过分析历史指标的情况,预测未来的发展,提升管理层次,达到面向服务品质的管理。CPU C CPU )开兼时间:因也-好1908:51顼结束时间俱1割*2210:08:512|想查询 圆导出(XM) 0刷新1 0:001 1:0012:0013:001 4:001 5:001 6:001 7:001 8:001 9:0t一便用率(cgu)系统opu占有率(opu)空fflWpu)图：CPU汇总1.1.1.5 拓扑处理拓扑图的生成可支持手工配置或导入,也可通过系统自动发现并注册实现,以上几种方式都是以CMDB为基础,进而获取每个节点在拓扑图中的位置和它们间的依存关系,从而构建出整个IT运营网路,通过实时刷新拓扑图,可反映出当前网络中节点的最新状态,帮助运维人员从宏观上对对整个IT支撑系统的运行情况有直观的掌握,进一步提高运维的效率。拓扑管理通过CMDB对象实例树,可方便的对拓扑图中的节点,及节点间的关系进行维护,系统支持对节点的增加、删除、修改属性,状态及更改不同节点间的依附关系等。图：网络拓扑 拓扑监测拓扑监测是根据拓扑模型,对在模型上定义的关键节点,节点关键性能、质量指标数据进行实时监控,将业务系统运行中出现的告警、预警信息直观呈现在拓扑模型中,来实现对应用系统运行状态的专题式监控,及时发现用户关注的异常。支持通过拓扑图关联到应用节点详细信息页面,可根据时间段来查询该节点的告警信息列表,进而进行相关告警处理如告警确认、告警级别调整、告警清除等操作；支持通过拓扑图关联到应用节点详细信息页面,可根据时间段来查询该节点的历史指标数据,以表格或走势图的方式展现,支持业务指标数据导出功能,导出格式包括但不限于文本、EXCEL等文件格式；拓扑视图支持定时无闪烁刷新功能,刷新频率不宜过高,以不影响系统性能和展现效果为基准,也不宜过低,否则无法达到监测的实时性要求。TlHHltLitBr.V!图：拓扑监测3 3S-.22a.LL9.ta?mil.Ff叶州3用王fl应用拓扑以IT系统内的业务类型作为索引来组织被管资源的业务拓扑结构。典型的业务拓扑图是一个树型结构,实现业务与IT基础设施关联关系的直观展现。系统提供方便的图形化配置修改工具,允许管理维护人员灵活修改相关联资源等基本配置信息。成Affi旺图：应用拓扑以下以某电信运维监控管理平台拓扑处理为例：点击HB计费:图：节点拓扑点击具体节点:图：地市拓扑以应用系统作为索引来组织应用软件包含的被管资源的拓扑结构。应用拓扑表达应用软件被管资源的分布和关联情况。系统通过提供方便的图形化配置修改工具,允许管理维护人员灵活修改组成应用系统的相关联资源等基本配置信息。拓扑图能够展现应用软件被管资源的运行状态,包括应用软件的配置信息、告警信息和性能信息,且可以实现相关拓扑图的自动生成。图：计费生产流程拓扑1.1.1.6操作控制主要完成运维监控管理平台控制模块与被监控对象之间的操作指令传递与结果反馈通道,以便完成对被管对象的自动化控制,在运维监控管理平台中的主要应用为进程、服务的启停和调用等。ihF心jE rms-EHWh4ttff-LLahjwf Ixajjbrd-fer/kriidf-MqiFi&iB.演耳1ET正重anjfi3umMrT*3*0rlvui/4j4Un?n,i-tacBur:m tan 勺ww-jp-n -4 Me EmW .:档 EjL2QH Xfijffi9ETanIrtouftQ-y EWin假设4L-trk*Hi.n远后gniZi A PloWsw it野mi：日志怀:L1S土/ pr*f-aA 1 Lai piiilLBtrwiiu|ibr3DWii!idritiiiii|!. Pr+F-ts-iLi.aa. pk4rriEVAHuvln*3rhi*552aid-dBrl4MIJ0-J&-I9aa m mn gm0Mb攻*置童mu曰宜 MiBj.震琳技曰名 心曲TLaPrarHr.iiiiTRiiri-H/tiLimp rrh-3TW.G,rpbri*fZ!rBRfirsrrbit00 g0MMXHJT* 田韩日霍:日mA:aEr s vra,1 v ip br i afkr lBtf r ! Ill 、al 4st&I5XrbMPaklaJk-ivBrr十MLd-3d-i4始胃m白膏旬fi曰柬云州.DLi 胃ra i Ji up i . 1 n j umWIMKF JI ifrifB Li “il*Hto WMl员皿版|臼jj g：Dd0岫m.成KB博.1/TETin【uwcn3MW-JD-I1?i NDHWnxkZ 普.串址曰些 MS叫frL Ct,tkJ11,n 41 nL 可 m *n J* IT “4 fv/jTCf-H! i jadfrcf-irVi-Ri “dn= f 虹 q (ZW TKTFkO WE 蚌 IM日ET说村M国!-wrg#-lA 抻w a* ftouftXrkjzw* Eoiura石.EjrrLlhn门551*几fHWSLIpE jlJrr讪硕i-HaTr3sna-io-14皿M Dd0V-y曰尊 WfeNLflEriivtr/iiini h*3*rjlrL - tr a *iw i* i 乂衅 br wLThrF-rtirrthAC pi 1正言曲lowCIJehCUToJfftnvwriYHTi甥aLo-im:BJLOmn ca gmBhY律咀技目寞 MjgftMiUA：fcm ftfTdlWB m豚nifraTw/iJTibra-Fiyh-mUf/vs*pidE1CawtfriYsrrbeMufl-iP-iiM OV Ul0耻心林豪出Ml或 w.A户a air-ma r ip -I|i 1Irrn lvr luab ：ET,翊IliraQj/FBah ivarrMlLd-3b-i4M垣MaWJA 富Um亳:i1bT/VLti 胃Ta Piupki J liLAi.峙*lL“ gnd. tn 1 uarrl m p mm LlL IT*iHt*3-iMDI/TdJAhi-karHCriiSaCta i miQiri:aa 皿aa ra-uim gma心W TiBtt曰毒心州宣加核日寿/TLalk w/lujitrd+r/krHf-cr*mEj!lI-be jlJETIimCH/tttJ+nrlvuitecoa nDn.A：lcf 激暑lHH曰庞图：操作控制操作控制主要是通过以下方式登录到设备上执行操作。SNMP方式：支持SNMP接的系统,可以此方式得到;telnet方式：通过telnet等方式对网元进行操作；Agent方式：通过在服务器上安装Agent控制服务器的操作;ssh方式：大量操作控制采用安全的ssh执行；FTP/TFTP方式：FTP等文件方式传输配置文件；rlogin方式：远程登录后执行；Rsh、rexec方式：直接远程执行相应的操作;NT登录方式：登录到NT上执行相应的操作;HTTPS方式：通过HTTPS对相应的网元执行操作;Web service方式：对于支持web service的应用系统采用本方式;图：操作控制截面图1.1.2应用软件监控应用软件监控是通过对xxxx的各IT应用（进程池、进程、接和数据文件、日志等）进行监控,及时发现系统应用软件的异常,并确定故障原因,进行故障定位和处理,保证应用软件正常运行,提高IT应用软件运行管理水平。1.1.2.1进程监控提供对应用进程的监控管理,确保系统可靠、稳定地运行。支持对各进程运行状态进行监视,能够实时查看进程名称、进程号、进程启动路径、进程状态、进程说明信息等相关运行信息。当进程异常终止时,能够生成相应告警。在UNIX操作系统上,经常出现由于资源竞争而导致死锁的一些进程,从操作系统的进程状态上看这些进程是正常的,但从业务功能角度,这些进程实际已处于僵死状态,因为它们已不能处理任何业务逻辑。运维监控管理平台支持对进程日志是否增长等方式发现僵死进程并告警。WE 1睡号曲1塔蜗冬场府皿日王瓦名*用户苫点FEliiSB 用遥超A 巨蜂廿显*竹不此1也期ncma_P1331rt:40100t0我卿业丹10131rKi5LPMl 1545 WX.EI -x.lMJ0100t00SlP1121贵心t.史hj01Q010(1玛图旧业告职泗氏Ift用伯M.* 聊WBt5LPtSliM? g.miF_J潮a10atQ0it映ST业冬*冲8LP睥亍1忻蜂 w小*10100C0EhidukirS.PIXIi iG4 g如;1nxtaii01a0t0砌切。业耳1DW5S4WiB?-S； wk牛IB5LPFH1IH5 忡侦 1史701001C0SMVHJbA-无1购而F拿XEWeSlF旧21 i泌hx_imj0100fr0i无蛆牌力业抻图：进程监控图系统支持对某一时刻的进程状态进行记录拍照,在后续时刻发现与拍照记录不一致时,可按拍照状态复原；发现进程运行状态与拍照状态不符时的及时告警,通知运维人员。1.1.2.2进程池监控进程池监测是指对假设干个具有相关性的应用进程进行集中管理监控,进程池的主要作用是在有多个客户端并发请求时提高服务器的处理效率。系统能够进程池的配置信息进行管理,包括最大进程数量、最小进程数量以及进程池对应的日志文件。系统能够通过进程池所应当包含的进程数量等性能数据的处理与分析,及时发现进程池的异常情况,保障系统正常运行,并为分析优化工作提供必要的依据。在性能数据处理过程中,保证处理的完整性和连续性。当出现异常情况时,应能够生成相应告警并转发对应处理人员。1.1.2.3文件积压监控对应用系统间文件类传输接进行积压监控,及时发现进程异常和接异常。1.1.2.4应用服务监控提供对中间件的应用服务和ORACLE的job进行监控,当中间件的应用服务异常,或者ORACLE的job异常时,能够生成相应告警。1.1.2.5侦听监测可集中监测CRM、服务开通等系统后台侦听的运行状态信息,当侦听异常时,系统可提供集中的操作功能,重启目标侦听进程。瞄起 MlUi -STtiriVJEaflH 1Sffl&EE 11And: 页:- betsW JQfflSE好右松fEWkNEfi?翊原炼fiF=jr养J|主机jEiTM.* 禹 Lio主册ECRUEfiTtft ft：:j:1-3/Tsisfeivir/ijuoilsrii.afa;cy,iban. jrajitrkiHai. pi.i/EslsTfraYiir/ijmiilcrirfibrLafatEaaMisiLjtrBjirlJraL ji.li*talaEidddMbvL f ciith,中?乓,i*TaLa：Eidvmf/L f“财冠11皿 tlJrd.hrjY4iJi_upkJ-jIilbcLatut-:-jmp. pxipu Lid f-l/Tsisfeivir/ijuoilsribri.nEijlibtf jrajitrkiHai. pi.ift si ilfra Y4F? iaaj al?i.k du jurp. pr wrti.9L,可/T.NEidViHr/EilEriiidbifLwSbecSjntrKiTaj.rUiML ji.l,i*T La：EidvmtksrbvL fe 1:ifidriKlnip F.MirLiiK 3! 1i,d.hrjYUiJi-upacLiXilnGriif-JEap. pxiptrLju. pj ift al slni nr/ iaaj n KrlitrirsijljplTrllr3- rrBjrla3,.illiisrp. pfbjktHwil,可i*t al aEidbsqi i aidr/ifauf b L quijis. praf stHak. W 1ri9yll京叵H开谓听尊UllRT.1 l.u.wrjYu/i-upkJ-JUjbcLatal.cyhkb. pxiptrLju. pj I/TalsIlniYir/iaajl!TiiidarbrLiEatffi HwifsrHprkiua.ji./EslsTfraYiir/ijmiilcrirfibrLafatEaayHsiLjtrBjirlJraL ji.l/TJLWEiriMr#既OiDiM/ihlLErrEntbe.时占正M球IKEKEH正M球IKEKEH正M球IKEKEH正M球IKTEMEeFt都 BfTfTEeFt都BfTfTEeFt都BfTfTEeFt都BfTkfTlauOdIeuj:lEUIui43lauOdIeuj:lEUIui43lauOdIeuj:lEUIui43lauOdIeuj:lEU1 HHEhItl膈w占！iim打!am!fjalrL/raniTL膈w占！iim打!am!fjalrL/raniTL膈w占！iim打!am!fjalrL/raniTL膈w占！iim打!amm .1 一 j&Kfrr侦侦faiC&Kfrr侦侦faiC&Kfrr侦侦faiC&Kfrr侦浏EfdO-ffil-LiGDia-OJ-L*HXIO-OJ-L*Dja-O3-L浏（HHMEfdO-ffil-LiGDia-OJ-L*HXIO-OJ-L*Dja-O3-L浏（HHMEfdO-ffil-LiGDia-OJ-L*HXIO-OJ-L*Dja-O3-L.-U.|.QEfi w m aSEi U 1 aso w oa a1.-U.|.QEfi w m aSEi U 1 aso w oa a1.-U.|.QEfi w m aSEi U 1 aso w oa aBHEGAH宝客 HtflH*|珀王机王机古pFnraii-sv-印.gfirVBJnsra uhin dki ennin-Ltrn.nrzhnrrn urn mct. evzit使2KTO：皿 WJEUEanlM-fiUXU23BT aJUTH n*th qwut3河El OEER HEfeiMlif CW 度iirlvrA.1K1RHsmi hj.ehjl Xi Eteijcer. sun4Z5 mWJFUJM1srrUrtl.LHTnm mmw awLBoao5nTB uhih qmi enrrdb-LirH.WQElnnn urn w,eviitE-ona. DUEiirrD dutin-Ltrn.UHWZnqti DTicsim aur1TOOT汹Eta AlUi CuML EVEiTanlM-fiUXU2加H hlUH ChuHlL EtHTB部皿 HEmncL EAEniirlvrA.i.KWIRWBLAMJH COWIL EATffl&ST5TE1 OmE EfEIMIHH CW 度srrUrtl.I.ICWIsmi CEUgajL ii Et eiicer. sunajrrrzi mjixdb-LirH.WQK3jrjrsn Awm nm qisueLLCD DUEUirD DUTin-Ltrn.UHK1nqcD DTicsim aurzTOOiJ汹Eta AlUi CuML EVEiTanlM-fi加H hlUH ChuHlL EtHT2winuSJEMWITmA.MiEiirlvrA.LHT遗 UH 加 H. QfEkOWWEfli.isisrH JJHiHWB rarrsrrUrtl.l.KWIElWJMDr. AWsjrrrzi mjixdb-LirH.WQE1jrjrsn Awm nm qisuesS5EB AMII CUIKL EYEVTin-Ltrn.UHWIZT5TBI MHH ntURL EVENTi.ira CLfEROUEanlM-fiUXtfl3Bftt CUETEk UHeiltflf 待企IS:r-fflafiAKDSILI.CKKl CfHFilHW DUiirlvrA.rh1.烦OUEKJHEVinnLsoaoSRLEh CUfFEt UFtCJlWr QQHm-irfcl图：队列监控图1.1.2.7 Web应用监测可集中监测前台Web应用的运行状态、挂起线程数、超时时长,当挂起线程数较多时,系统可及时触发告警,提醒业务支撑人员进行及时处理。* 1-业翩崛洛富我ea 言 ? LEEVS1 由E留真.岫授ANTS. StrIK| an |丽国TL滴主nsfta%aL正*rarverL3fFK4l1aDSdWHS-H 0： W：LE5正常S聃Q0stnmrK so w；:3Eflf-正雷u5dta0jjaia-rar：i za i:4正y菖y0D归liKS-1： !MRETaD2di.a-oe-H &： :6orsSIilfi正*crsSlwhS竣细aDS1WHS-H 0： W：LE*S正需liEeha0jjaia-rar：i za i:3心L正雷eSLkSla0jm la-rar:i rSLET瑚瑚aDan(H-：H &：ii正*cTB51baDaiWHS-H 0： W：|：正需心吊出a0jm la-rar:i za 13正雷Lkl-llWSa0jm la-rar:i za Hm正言riArrEiSJDSiiMS-U 凯 ti IE出ETZ,嗦i2QDan(H-：H &：:j-crsBfilfitr3fb3幽DS1WHS-H 0： W：|：T正需勺5bSI1S10jm la-rar:i za IEEflC-正雷ullI1S10jm la-rar:i Wi iJfT iL33iiAL.-:做更：nn- wvr图：web监控图1.1.2.8接平台监测系统可及时监测各个接平台运行服务的运行状态和响应性能信息,针对运行异常和性能较差的服务系统可及时触发告警,并能够对服务当天的探测性能和历史响应能力进行图形化的展示。图：服务运行状态实时监控a A A A A A图：各接服务响应性能对比监测BH平均*短时比切勃k坎顿Gb*现1 2D!O-in-14m mm：血ra:ISE2MIDCLiXBfe2 RIMUM洵a33ICCUXKt3 501012172 wa滋蛎I00.01%-4 Mia-m-nn却田ra2UICCLOtHt15.1,戏版皿a龄100.00%-t泗曲仗丽汕寸4防*a海ICSuKl%M4ra515 raI SBI-S1IDCLMS：V 1 _!*衬著tiT； 1图：接服务响应性能趋势分析（分时及历史分析）1.1.3业务监控业务监控主要是对xxxx业务受理、充值缴费、停复机等端到端的客户感知度强的业务流程进行监控,主动发现这