1、1l北京邮政灾备切换事故北京邮政灾备切换事故需求迫切性、监控可靠性、马上监控起来需求迫切性、监控可靠性、马上监控起来l北京邮政北京邮政tuxedo监控，自行脚本利用监控，自行脚本利用l安徽邮政安徽邮政自行监控扩展、脚本利用、经验沉淀自行监控扩展、脚本利用、经验沉淀l北京报刊发行局北京报刊发行局订阅量实时监控、报警、考核订阅量实时监控、报警、考核业务监控业务监控l邮储银行邮储银行网点开通率考核网点开通率考核业务管理业务管理l邮储银行邮储银行制定应用监控开发标准制定应用监控开发标准应用监控体系化建设应用监控体系化建设l邮储银行邮储银行报警内容的个性化需求报警内容的个性化需求l北京邮政北京邮政机房资
2、源管理机房资源管理l某省信息中心某省信息中心公共信息发布平台，网站内容更新情况考核公共信息发布平台，网站内容更新情况考核应应用监控用监控l某高校某高校网站内容变更监控网站内容变更监控2l北京邮政信息技术局，北京邮政信息技术局，2009年，上一套灾备系统，上线时，不稳定，后来无年，上一套灾备系统，上线时，不稳定，后来无意中发现日志中出现一行提示后，意中发现日志中出现一行提示后，20分钟，就会切换到有问题的灾备系统上。分钟，就会切换到有问题的灾备系统上。规律找到一部分，但这行提示什么时候出现还是没有规律。规律找到一部分，但这行提示什么时候出现还是没有规律。l用户很着急，问能不能马上监控起来？用户很
3、着急，问能不能马上监控起来？需求迫切性、突发性需求迫切性、突发性l正好当时我们有实施人员在现场，用了正好当时我们有实施人员在现场，用了20分钟，就配好了。日志监控分钟，就配好了。日志监控l告诉用户配好了，用户依然不放心。告诉用户配好了，用户依然不放心。监控是否有效，担心的心理，虽然监控是否有效，担心的心理，虽然监控了，但是不是管用？监控了，但是不是管用？l当天晚上就报警了。用户很满意，感觉很实用，想监控什么就能做到。当天晚上就报警了。用户很满意，感觉很实用，想监控什么就能做到。l总结：监控需求具有迫切性、突发性特点，监控需求能否马上实现总结：监控需求具有迫切性、突发性特点，监控需求能否马上实现
4、？监控？监控不不可能面面俱到，但出了问题，能不能有效预警下次的出现是着重考虑的可能面面俱到，但出了问题，能不能有效预警下次的出现是着重考虑的3l2010年，邮政综合网监控，在北京邮政信息技术局上线。年，邮政综合网监控，在北京邮政信息技术局上线。lTuxedo监控，原本我们的平台提供了一套监控方式（监控，原本我们的平台提供了一套监控方式（ATMI接口）。接口）。l北京局的人说了，我们原来都是用北京局的人说了，我们原来都是用Unix命令行，监控系统信号灯的，很实用，命令行，监控系统信号灯的，很实用，我们也习惯了，能不能还用上？我们也习惯了，能不能还用上？一方面是用户的习惯，另一方面也反映一方面是用
5、户的习惯，另一方面也反映了用户潜意识对新的东西不放心，怎么办？最好的办法是让他保留原来的习了用户潜意识对新的东西不放心，怎么办？最好的办法是让他保留原来的习惯惯l实施人员和局方人员一起，了解他的命令行，解析命令行结果，配置的方式实施人员和局方人员一起，了解他的命令行，解析命令行结果，配置的方式教给他们。两天左右，就把原来的全部脚本配到监控平台上了。教给他们。两天左右，就把原来的全部脚本配到监控平台上了。l他们感觉很实用。一方面原来的监测命令都用上了，同时监控平台定期轮询，他们感觉很实用。一方面原来的监测命令都用上了，同时监控平台定期轮询，能解放他们原来手工执行脚本，提高生产率。能解放他们原来手
6、工执行脚本，提高生产率。l总结：沉淀用户的经验，能让用户更放心。也是监控系统扩展性的体现。同总结：沉淀用户的经验，能让用户更放心。也是监控系统扩展性的体现。同时，也是对用户原有经验的充分认同和尊重。时，也是对用户原有经验的充分认同和尊重。4l2010年，邮政综合网在邮政集团公司全国信息中心、年，邮政综合网在邮政集团公司全国信息中心、33个省中心上线。个省中心上线。l年底，开了上现总结交流会，准备进一步培训。培训内容就是如何通过监控年底，开了上现总结交流会，准备进一步培训。培训内容就是如何通过监控平台，进一步开展深入监控。如何通过配置方式进行。平台，进一步开展深入监控。如何通过配置方式进行。l会
7、上，安徽邮政信息技术局的代表就说了，会上，安徽邮政信息技术局的代表就说了，“我们已经把我们原来的对中心我们已经把我们原来的对中心局、电子化支局监控的脚本，配到平台中了，已经用起来了局、电子化支局监控的脚本，配到平台中了，已经用起来了”l领导很惊讶，领导很惊讶，“你们怎么会知道呢？你们怎么会知道呢？”“”“公司的人在实施的时候教给我们了，公司的人在实施的时候教给我们了，我们就自己调整了，还不错，挺实用的我们就自己调整了，还不错，挺实用的”。领导很高兴。领导很高兴l“综合网内设备非常多、监控需求复杂多变，未来我们还会有很多新的业务综合网内设备非常多、监控需求复杂多变，未来我们还会有很多新的业务系统
8、上线，因此，监控需求具有很多不确定性。因此，我们对监控平台的扩系统上线，因此，监控需求具有很多不确定性。因此，我们对监控平台的扩展性要求很高。展性要求很高。WisentSoft监控平台通过配置方式实现监控扩展的特点非常监控平台通过配置方式实现监控扩展的特点非常突出。这个平台技术上不一定是最先进的，但对我们来说，确实是非常实用突出。这个平台技术上不一定是最先进的，但对我们来说，确实是非常实用的的”邮政集团运维部邮政集团运维部周主任周主任l总结：用户存在原有经验沉淀的需求，应充分尊重并满足这种需求总结：用户存在原有经验沉淀的需求，应充分尊重并满足这种需求5l北京报刊发行局，承担主流媒体的纸介质发行
9、任务。每年任务北京报刊发行局，承担主流媒体的纸介质发行任务。每年任务8亿。任务很重。亿。任务很重。每年年底都是报刊发行的营销旺季每年年底都是报刊发行的营销旺季。l现在的报刊订销系统里的数据虽然也能反映一些，但都不是直接的数据，每现在的报刊订销系统里的数据虽然也能反映一些，但都不是直接的数据，每天还需要科里专门人员重新做报表统计，很麻烦。，非常需要实时掌握各部天还需要科里专门人员重新做报表统计，很麻烦。，非常需要实时掌握各部门的营销动态门的营销动态。l这个系统大约这个系统大约9年前开发商去开发的。年前开发商去开发的。也不可能要求开发商去修改报刊订销系也不可能要求开发商去修改报刊订销系统。统。l综
10、合网综合网监控系统监控系统上线后，通过配置，直接监控报刊系统里的几张数据表记录，上线后，通过配置，直接监控报刊系统里的几张数据表记录，就可以直接掌握我们想要的数据。确实方便很多。就可以直接掌握我们想要的数据。确实方便很多。l而且，在旺季，针对每个区局、网点班组，设置每天任务完成情况告警阀值，而且，在旺季，针对每个区局、网点班组，设置每天任务完成情况告警阀值，低于阀值时就报警。发行科的管理人员可以非常有针对性的督促、指导具体低于阀值时就报警。发行科的管理人员可以非常有针对性的督促、指导具体人员，非常实用。人员，非常实用。l总结：监控原本从技术监控延伸到业务管理，考量系统的扩展性。总结：监控原本从
11、技术监控延伸到业务管理，考量系统的扩展性。6l全国共有约全国共有约6万多个网点。领导万多个网点。领导很很关心：网点是否正常、准时营业？关心：网点是否正常、准时营业？直接影响到业务开展。如何考核呢？直接影响到业务开展。如何考核呢？l2011年上线省前置服务器运行监控系统年上线省前置服务器运行监控系统。原本目的是为了对服务器、。原本目的是为了对服务器、网点画面进程等进行监控。网点画面进程等进行监控。l后来发现，可以监控网点终端接入前置机的进程状态。可以知道何时后来发现，可以监控网点终端接入前置机的进程状态。可以知道何时接入？是否发生交易？何时退出等。接入？是否发生交易？何时退出等。l通过这些通过这
12、些监控，就知道什么时候网点开通？是否服务受理？何时下班监控，就知道什么时候网点开通？是否服务受理？何时下班等？等？l总结：监控原本用于技术监控，延伸到业务管理，而且很方便总结：监控原本用于技术监控，延伸到业务管理，而且很方便7l邮储银行先后上了：全国中心集中监控系统邮储银行先后上了：全国中心集中监控系统、省前置服务器集中监、省前置服务器集中监控系统。这控系统。这两两大监控系统基本上覆盖了从后台到前置的全部硬件、软大监控系统基本上覆盖了从后台到前置的全部硬件、软件系统的监控，包括件系统的监控，包括20多个核心应用系统的监控多个核心应用系统的监控l原有建设模式：应用开发原有建设模式：应用开发+应用
13、监控应用监控 全部全部委托给开发商。逐步认委托给开发商。逐步认识到弊端：识到弊端：l开发商擅长的是应用开发，不是监控；应用上线后，还会有新的应用监控需求怎开发商擅长的是应用开发，不是监控；应用上线后，还会有新的应用监控需求怎么办？时效性难以满足。么办？时效性难以满足。l有多少有多少个应用系统，就有多少个应用监控子系统。来回切换，很麻烦的个应用系统，就有多少个应用监控子系统。来回切换，很麻烦的。仅。仅2012-2013年，就要上大大小小年，就要上大大小小63个系统。如此下去，简直难以想象。个系统。如此下去，简直难以想象。l目前，正逐步改变原有开发模式，以我们的平台为目前，正逐步改变原有开发模式，
14、以我们的平台为核心，正在制定应核心，正在制定应用开发标准用开发标准，在应用开发设计时，需满足应用监控需求的一系列设计，在应用开发设计时，需满足应用监控需求的一系列设计规范：应用状态分类、输出内容、格式、编码规则等规范：应用状态分类、输出内容、格式、编码规则等l总结：监控的个性化需求贯穿各个方面总结：监控的个性化需求贯穿各个方面8l邮储银行先后上了：全国中心集中监控系统邮储银行先后上了：全国中心集中监控系统、省前置服务器集中监、省前置服务器集中监控系统。这控系统。这两两大监控系统基本上覆盖了从后台到前置的全部硬件、软大监控系统基本上覆盖了从后台到前置的全部硬件、软件系统的监控，包括件系统的监控，
15、包括20多个核心应用系统的监控多个核心应用系统的监控l曾经有一段时间，用户反映，在小额信贷系统里总出现误报。曾经有一段时间，用户反映，在小额信贷系统里总出现误报。l后来实施后来实施人员发现，不是误报，监测到的故障是对的，但报警内容有人员发现，不是误报，监测到的故障是对的，但报警内容有些含混。原因是，监控系统对故障报警内容，有一套默认的标准报出些含混。原因是，监控系统对故障报警内容，有一套默认的标准报出模板：设备模板：设备+设备部位设备部位+指标指标+正常值正常值+异常值。异常值。l这套这套标准报出内容，在这个地方容易误解。后来，针对这个设备的这标准报出内容，在这个地方容易误解。后来，针对这个设
16、备的这个部位，可单独修改其模板。问题解决了。个部位，可单独修改其模板。问题解决了。l总结：监控个性化需求体现在每一细小地方，确实需要精细化处理总结：监控个性化需求体现在每一细小地方，确实需要精细化处理9l以前曾经出现过：房山的几个网点网络断了，知道肯定是网络故障，但哪台以前曾经出现过：房山的几个网点网络断了，知道肯定是网络故障，但哪台设备不知道，只好在信息局大楼内，沿着走线，一个个地方查。后来发现，设备不知道，只好在信息局大楼内，沿着走线，一个个地方查。后来发现，5楼楼梯拐角处，网络交换机脏了楼楼梯拐角处，网络交换机脏了l2010年底，机房搬迁，网线、电力线全部重新走线。年底，机房搬迁，网线、
17、电力线全部重新走线。l需要：直观地知道网线是怎么走的、电线怎么走的、每个机柜里的服务器是需要：直观地知道网线是怎么走的、电线怎么走的、每个机柜里的服务器是干什么的、服务器出问题了，怎么能快速找到这台服务器，近距离维修。干什么的、服务器出问题了，怎么能快速找到这台服务器，近距离维修。l我们的我们的IT资源管理平台，提供了可视化方式管理机房、机柜的空间资源、布资源管理平台，提供了可视化方式管理机房、机柜的空间资源、布线资源管理，可以很好地、图形化操作方式满足需求。线资源管理，可以很好地、图形化操作方式满足需求。l服务器预上服务器预上架：可预先知道应该放到哪个机柜合适：机柜空间能较好地利用，供架：可
18、预先知道应该放到哪个机柜合适：机柜空间能较好地利用，供电是否三项均衡分配，也可根据这台服务器的重要性，进一步看看它的供电线路电是否三项均衡分配，也可根据这台服务器的重要性，进一步看看它的供电线路上，由于没有单点故障点，网络线路上有没有单点风险等上，由于没有单点故障点，网络线路上有没有单点风险等资源分配的冲突分资源分配的冲突分析析l总结：机房辅助资源的配置管理管理很重要总结：机房辅助资源的配置管理管理很重要10l某省信息中心：有一套公共信息发布门户系统，对公众发布各委办局的公开某省信息中心：有一套公共信息发布门户系统，对公众发布各委办局的公开信息。门户系统下面连接几十个局的系统。由各局将要发布的
19、信息，主动放信息。门户系统下面连接几十个局的系统。由各局将要发布的信息，主动放到门户系统中。到门户系统中。l由于行政管理划分的原因，各委办局对公共信息发布不是很主动，信息中心由于行政管理划分的原因，各委办局对公共信息发布不是很主动，信息中心也不好经常催。后来，信息中心搞了个考核办法，要求各局每月完成内容更也不好经常催。后来，信息中心搞了个考核办法，要求各局每月完成内容更新至少多少次，量化考核。新至少多少次，量化考核。l上有政策，下有对策。有的局，只是把同一条新闻改个字，改个时间等，就上有政策，下有对策。有的局，只是把同一条新闻改个字，改个时间等，就发布了。结果还是没有起到促进信息发布的作用。发布了。结果还是没有起到促进信息发布的作用。l用了我们的监控系统，网页内容监控：更新次数记录，更新内容比对，相似用了我们的监控系统，网页内容监控：更新次数记录，更新内容比对，相似度超过多少就判为假更新。度超过多少就判为假更新。l总结：总结：技术技术监控用于业务管理监控用于业务管理11l某高校，校园网建设后，关心网站内容某高校，校园网建设后，关心网站内容12
