以下为《关于松桃县重大故障的分析报告V4》的无排版文字预览，完整格式请下载

下载前请仔细阅读文字预览以及下方图片预览。图片预览是什么样的，下载的文档就是什么样的。

松桃县10月27日重大故障分析报告

一、故障现象

2020年10月27日14点30左右松桃一机楼OTN8700设备出现部分单板不在位、电源关闭告警，单板反复上线，但未影响业务，网络部马上通知松***维护人员前往现场核实情况，***人员于14点50左右达到现场，发现OTN8700设备上方天花板漏水，***马上安排现场人员分两组进行处理，一组人对已故障的8700设备及周围设备用护扳和雨布进行遮挡，防止造成进一步损失，另一组人核查楼层漏水原因。经现场核实为三楼住户卫生间水管爆裂导致房屋积水后漏水至二楼机房，维护人员确认后立即关闭楼宇供水总闸，并同时疏通卫生间排水系统，组织人员清理住户房屋积水。

现场人员到达导致红外告警情况：

/

中兴传输OTN8700设备告警情况：

/

15点24分，由于传输OTN8700设备浸水严重，导致设备全面故障，该设备所承载的“松桃一机楼--XX新华某某”所有“县-市”级业务链路悉数中断造成相关业务中断，导致XX松桃2G基站中断351个，OLT管理中断（业务未中断），VPN专线业务中断。

二、故障处理经过

（1）15点30分网络部按照前期重大故障应急预案执行业务抢通操作，由于中兴U31网管下发倒换命令需先对现网数据进行备份，直至15点51分2G基站逐步开始恢复，最终16点19分故障影响基站全部恢复，故障历时0.91小时。

（2）因其他业务无法通过网管侧操作应急恢复，故在执行倒换操作同时，利用新扩容的松桃二机楼-新华某某OTN单波规划业务通道，安排松桃及XX现场人员对松桃一机楼至松桃二机楼、XX新华某某内跳纤，将业务通过松桃二机楼OTN调度至XX新华OTN，VPN专线业务于17:35分陆续恢复。

（3）为尽快完整恢复业务链路，经过现网资源梳理，计划将承载业务较少的松桃二机楼CX51子架进行割，用于替换老移动CX71子架，业务单板利旧（过程中发现2块LS4、一块CS4已损坏，调用备件资源解决）。整个替换工作于10月29日凌晨3点完成，所有业务链路恢复，整个故障处理完成。

三、故障原因分析

3.1 OTN设备故障原因分析

松桃移动一机楼为移动分营前邮政、电信、移动共同出资建设的楼房，房屋共六层，其中一楼为营业厅、二楼为通信机房、三楼至六楼为住户，三楼常年无人居住。2020年10月27日三楼住房卫生间的水管老化破裂，排水系统堵塞，卫生间积水蔓延至整个房屋，最终穿过楼层滴漏至二楼通信机房中兴传输OTN8700设备上导致设备故障。

/

国庆前县级通信机楼要求后备油机带载测试和动环温湿度以及水浸告警验证测试，且松桃一机楼已于2020年9月23日完成油机带载测试和水浸告警验证测试，测试结果正常，如图所示。

/

2020年10月27日松桃县一机楼在8700故障前期未出现动环水浸告警，动环水浸采样点布放在机房墙边地面，此次漏水由天花板滴下，导致设备进水严重，但地面积水较少，以上原因导致动环未发出水浸告警。

故障恢复后，现场立即在对水浸告警进行测试验证，19点35分进行水浸告警测试，同步无延时的在监控平台出现水浸告警。

/

故障恢复后动环监控测试结果

3.2 相关业务中断原因如下

2G业务中断原因:松桃2G业务全部由松桃县移动9008-1/松桃县移动9008-2两台部署于松桃一机楼（前期还未建设二机楼）的骨干PTN汇聚收敛传送至XX新华某某BSC，由于均经过松桃一机楼OTN，松桃2G基站全部中断。

/

OLT管理中断（业务正常）、VPN专线故障原因：松桃大部分OLT承载的小区宽带及互联网专线已全部下沉至松桃二机楼BAS05/BAS06上， 内容过长，仅展示头部和尾部部分文字预览，全文请查看图片预览。 、印江、沿河、松桃）核心机楼机房上存在住房。需做防水板隔离，经向市场询价，包工包料大约600元/M2，为保证此次故障不再发生，需对着留个机房进行整改优化，预计整改约300平方米，预计约18万元进行优化整改。

4.2 业务承载优化

针对2G业务，对存在同机楼隐患的其他7个区县，制定物理分离方案，通过二机楼新装的6700设备对一机楼其中一台9008进行替换，通过二机楼OTN上联至XXBSC，规避单点隐患。

针对VPN专线及OLT管理，***间跳纤，通过二机楼上联XXBAS，形成保护链路，规避因一机楼OTN故障导致的全某某。

以上为XX松桃重大故障的分析报告，不足之处请领导指出批评。

[文章尾部最后300字内容到此结束,中间部分内容请查看底下的图片预览]请点击下方选择您需要的文档下载。

1. 智慧中台基础知识及核心内涵
2. 业务持续性管理计划测试报告
3. 跟单工作流程图
4. 项目业务需求调研报告模板
5. IDC机房应急预案模板
6. 物联网博览会-智慧营业厅展示-0904
7. 【课件】HRBP课程分享(35页PPT)
8. 规则测试整理(1)
9. 6.业务撤销申请表V2.1
10. XX市人才一体化综合服务平台 以工代训补贴系统操作手册
11. ivr运营商业计划书
12. 了解并分析一个工商企业的组织结构
13. 《关于规范金融机构资产管理业务的指导意见》
14. XX省技术人才网上申报系统操作手册（外网）_人事单位
15. 公司运维服务方案
16. 系统数据中心网络主机设备维护项目年季度服务总结报告
17. 1.会计制度概述讲义
18. 中国通讯云服务行业研究报告
19. 京东直播白皮书-商家版V1.0 (1)
20. 附件1： 设备维修记录

以上为《关于松桃县重大故障的分析报告V4》的无排版文字预览，完整格式请下载

下载前请仔细阅读上面文字预览以及下方图片预览。图片预览是什么样的，下载的文档就是什么样的。