应急预案
目录
FOSY目(de)
为提高云平台服务器、存储故障处理能力，形成科学、有效、反应迅速(de)日常管理流程和应急处理机制，确保平台(de)安全和稳定运行，最大限度地减小故障对生产(de)影响，降低业务中断风险，特制定本规范. 适用范围
本规范适用于提供云计算虚拟化平台服务(de)服务器、存储管理，应对发生和可能发生(de)故障.
规范内容
移动门
服务器运维和应急处理应包括风险评估，检测体系和应急处理三个环节，合理有效(de)执行控制将防止故障影响扩大.
故障分类
平台故障包括服务器硬件和存储系统故障；自然灾害（水、火、电等）造成(de)物理破坏；人为误操作造成(de)损害等. 应急准备
部门责任人员明确职责和管理范围，根据实际情况，安排应急值班，确保到岗到人，联络畅通，处理及时准确.
具体措施
水情监测（1）建立安全、可靠、稳定运行(de)机房环境，防火、防雷电、防水、防静电、防尘；建立备份电源系统.
（2）虚拟化平台服务器应采用可靠、稳定、兼容性硬件，落实责任管理机制，遵守安全操作规范；对虚拟机和管理服务器进行定时备份；采用有效(de)虚拟化监控工具，及时发现问题和日报告.
故障处理规范
机房停电
接到停电通知后，相关人员应及时部署应对具体措施，启动备用电源，保证服务器正常
运行.
主机故障
（1）平台服务器出现硬件告警需要停机维护，服务器责任人应立即通知相关人员，将业务虚机迁移到集中其他服务器主机上，再将故障服务器切换至维护模式并从HA集中移除，负责陪同硬件厂家现场更换至成功恢复.
（2）若服务器硬件24小时内无法恢复，服务器责任人需书面报告原因并立即通知业务管理人员进行数据应急备份，防止灾难扩大.
（3）若虚拟化存储硬件出现告警，第一目击人应立即通知存储管理员，并上报主管领导，存储管理员应在报告1小时内联系厂家到场处理，处理完成后因报告原因，到解决方法；并立即对数据做完整性检查，消除重复发生隐患.
存储系统故障
（1）做好存储系统(de)定时备份，一旦出现数据损坏、丢失，能够及时恢复系统.
性引诱
（2）发生存储系统故障后，相关人员应检查出现故障(de)原因并尽快排除.
（3）如遇系统崩溃，数据丢失，应启用备份文件进行数据恢复.
云平台软件系统故障
（1）日常做好虚拟机(de)定时备份和快照，系统崩溃后，能够及时恢复虚拟机.
（2）发生虚拟机系统故障后，相关人员应及时通知业务人员检查出现故障(de)原因并尽快排除.
金属声屏障生产线（3）如遇虚拟机系统需要启用备份系统进行恢复时，应在恢复后和业务管理员仔细检查业务是否恢复并做好恢复记录.
云平台管理服务器故障预防
虚拟化服务器采用集配置.配套管理软件对虚拟数据中心管理单元进行集中管理，系统平台常年24小时运行，每天将产生大量(de)任务日志和记录信息.同时管理服务器担任了整个平台主机管理和集中配置(de)角，使用率极高.为了安全，应定期备份配置数据库，定期检查告警日志.
玻璃压延机
云平台日常告警故障排除
当虚拟化平台出现告警信息，通过以下步骤排除：
1.确定故障原因.查看已触发(de)警报内容，确定故障前操作是否是引发该故障(de)
原因，对合规操作引起(de)告警，进行消除.
2.对提示硬件产生(de)告警，应查看硬件状态信息，对确认是硬件(de)问题按硬件维
护预案处理.
3.对提示因资源不足或性能引发(de)告警，因查看近期性能图表，出原因，消除故
障提示.
4.对于无法判断(de)故障，可导出系统日志发给厂家分析处理.
硬件故障预防与排除
故障预防
保持双机运行状态正常，单机出现故障后，及时对故障单机进行修复.
故障排除
当服务器出现硬件故障，通过以下步骤排除：
（1）确定故障原因.依次查看电源、硬盘、内存、主板、处理器等，如条件许可,
可使用替换法检测各硬件.
（2）恢复固件缺省配置.比如去除第三方厂商备件和非标配备件.
故障处理
（1）硬盘故障处理：当硬盘出现黄灯提示预警时，应先查看硬盘数据是否丢失，如数据存在应先做好数据备份，将此服务器各应用迅速转移，然后排查报警具体原因，如由于错误操作或硬盘连接不好引起(de)报警，可尝试重启服务器，重新插拔硬盘等操作即可解决问题.如硬盘损坏，应及时将备用硬盘替换下故障硬盘，使服务器恢复正常工作.排查过程中，如不能正确判断问题原因，不能随便操作，可向售后服务咨询处理.
（2）内存故障：由于我们(de)服务器有多组内存，单条内存故障时，会对服务器性能稍有影响，当不会影响整体使用，所以如发现内存条损坏时，安排时间将损坏(de)内存条替换掉即可.
（3）RAID卡故障：服务器(de)RAID卡出现故障时，系统会无法识别出硬盘，服务器不能正常使用，所以应第一时间启动备用服务器.将故障服务器移出生产网络后更换RAID卡,RAID卡通过硬盘重新读取RAID配置信息后即可恢复使用.
（4）电源故障：现阶段我们(de)服务器都是双电，如果单路电源故障不影响运行，如果长期单路停电运行需准备备用电源.
（5）CPU故障：我们(de)服务器多为8路CPU，所以在CPU故障时同内存一样，只会对服务器性能有所影响，不会影响整体使用，所以及时安排时间将有问题(de)CPU换掉即可.
（6）网卡故障：启用本机备用网卡，顶替故障网卡.
豫公网安备41160202000603
站长QQ:729038198
关于我们
投诉建议