中国移动浙江公司IT系统故障详细分析报告模板.pdf

中国移动浙江公司IT系统故障详细分析报告模板

十二月份故障分析报告(12月01日-12月31日)1、关于12月4

日客服部分座席多次出现被突然签出的故障(蓝)

2、关于12月8日金华用户反映通过社会渠道系统充值话费未到帐

的故障(蓝)

3、关于12月26日部分地市社会渠道客户关系管理系统登陆异常故

障(黄)

析到CDN地址。社会渠道管理平台通过IP能正常访问,通过域名访

问失败。终端系统、CRM新渠道通过IP与域名都能正常访问。判断

为CDN的问题,后经与网宿沟通确认,社会渠道为https应用,因网宿没

有导入相应的渠道证书,导致应用无法访问。终端系统、CRM新渠道

系统为http页面访问正常。

3、8:38通知代理点直接通过社会渠道三个源IP访问,业务恢复正

常。但因渠道系统代理点众多,部分通过域名访问平台的用户仍旧无法访

问。

4、8:40联系网管中心进行DNS配置回退,但未联系上厂家。

5、8:42联系CDN进行社会渠道域名回退,将渠道三个域名指向具

体的源站IP,但CDN厂家误认为受影响业务只有社会渠道电信域名,在

修改DNS配置时只将社会渠道电信域名A记录指向到源站IP

5,另外二个社会渠道域名未进行源站IP切换。DNS

部署与同步时间超过20分钟。6、9:05CMCC测试DNS解析电信域

第1页

名到源站IP,业务访问正常。但移动与网通域名DNS解析仍然为CDN

CNAME记录,业务无法正常访问。部分代理商反馈业务正常。

7、9:10因仍有部分用户业务未恢复,网络组要求网宿将渠道三个域

名NS记录到DCN智能DNS服务器(4与

4)

网宿反馈无法配置NS记录,只能配置A记录。这过程部署与同步时

间超过30分钟。

8、9:40CDN配置生效后,部分用户通过域名访问社会渠道页面仍然

无法打开。

9、9:50联系网管中心回退社会渠道、终端、CRM新渠道域名的

配置,删除网管DNS相应的CNAME记录,增加指向智能DNS服务

器的NS记录。DNS同步时间超过40分钟。

10、9:50-10:30在DNS配置同步过程中,维护人员页面发现访问

社会渠道、终端、CRM新渠道网站会跳转到广告页面,DNS解析社会

渠道域名会解析到未知IP,出现DNS劫持。

11、10:40联系电信公司,反馈DNS被劫持的情况。

12、10:40因网管中心全局DNSNS记录同步比较慢(同步周期2

小时),维护人员联系网管中心删除社会渠道、终端、CRM新渠道域名

的NS记录,并将域名NS记录修改成网宿提供的CNAME记录,

DNS配置同步时间30分钟。13、11:10