当前页面:首页 > 党建资讯 > 党建要闻
党建要闻
120秒快处大面积网络瘫痪故障,常州处跑出“效率运维”加速度
发布时间:2022-01-11 来源: 浏览量:4次

近日,常州管理处遭遇了有运维监测平台以来发生范围最大、影响面积最广的网络瘫痪。面对严寒和突发性特情双重压力,精工运维组迅速反应,仅用120秒处置大面积网络瘫痪故障,以车道“零拥堵”、服务“零距离”为目标,全力保障道路安全畅通。

超前部署,责任明晰突出“快”

一是基于近日网络不稳定的现状,围绕建立一个统一指挥、职责明确反应迅速、处置有力的机电系统安全体系的总目标,精工运维提前谋划,超前制定网络瘫痪预案并组织演练。二是故障发生后,立即组织相关系统单位召开视频紧急会议,成立网络故障检修工作领导小组,开出“连通性故障”“协议故障”“配置故障”三项“清单”,对每阶段的各项“清单”分解到步,责任落实到人,准确实施。

1641969213265043914.jpg

合力攻坚,上下联动发力“准”

一是借助Wireshark抓包工具对协议进行分析,从而定位排查方向位于网关及网关以上一级,重点排查路由设备,确保数据上传及时性。二是对涉及到的网络传输设备物理和协议接口逐级排查,更换亭内交换机、接入层交换机、光纤收发器等,最终查出问题原因为ETC安全网关与收费交换机短接形成广播风暴,于是采用可选路由协议,减弱广播风暴带来的影响,保证网络带宽满足服务高峰期传输速率。

1641969234990053288.jpg

深化成果,提质增效措施“实”

一是制定全流程跟踪机制,由3名运维骨干驻守,负责处理故障流程汇总和故障校验,由云值机对现场网络故障修复进程进行跟踪,对车牌输入、兜底计费等特情进行监测,将系统运行情况、未上传数量和需要协调解决的问题及时汇总上报。二是制定故障快处指南,以本次故障修复经验为蓝本,总结形成可复制可推广的经验,制定编写了《常州处收费网络故障快处指南》,内容涵盖从车道操作到通讯机房等多个方面。三是优化工作思路和举措,加大路网运行分析力度,查找保通保畅工作短板,进一步完善应急突发事件及机电系统故障专项应急预案。

1641969257872079124.jpg

深化成果,提质增效措施“实”

一是制定全流程跟踪机制,由3名运维骨干驻守,负责处理故障流程汇总和故障校验,由云值机对现场网络故障修复进程进行跟踪,对车牌输入、兜底计费等特情进行监测,将系统运行情况、未上传数量和需要协调解决的问题及时汇总上报。二是制定故障快处指南,以本次故障修复经验为蓝本,总结形成可复制可推广的经验,制定编写了《常州处收费网络故障快处指南》,内容涵盖从车道操作到通讯机房等多个方面。三是优化工作思路和举措,加大路网运行分析力度,查找保通保畅工作短板,进一步完善应急突发事件及机电系统故障专项应急预案。