机房消防应急预案

2022-07-05

第一篇：机房消防应急预案

机房消防应急预案

为使信息机房发生火灾事故时,当班人员能镇静有序地处置事件，特制订本预案，请各成员认真学习，熟悉应急处置程序，提高全员的应急能力，一旦发生突发事件，尽最大努力保证员工人身安全和减少损失。

起火原因一般有明火管理不慎;电气设备管理、使用不当;纵火等原因。

预案一：当闻到烧焦气味时

当班人员发现信息机房内有冒烟现象或闻到烧焦气味时，可能是某处阴燃处于起火阶段或电源超负荷发热引起，容易引发火灾，当班人员要立即查明原因和地点，针对不同情况，采取迅速将火源扑灭或关闭电源总开关、隔离火源附近易燃物、关闭窗等措施，消除起火隐患，防止引了火灾。事后立即向安保部门报告，并做好现场保护工作和防止起火点复燃，不得随意离开现场和将事故隐瞒不报。预案二：当班时发现起火或冒出浓烟

由于起火源隐蔽或其他突发原因未能及时发现和消除起火隐患，酿成明火和冒出浓烟，燃烧面积不大，就是火灾的初起阶段，当班人员发现起火或冒出浓烟时，切忌惊惶失措，要沉着、果断，会同其他当班人员分工协作，迅速查明原因组织扑救，当火执已无法控制时处置办法：

一是指定专人立即拔打“119”火警电话报警和向上级保卫部门报告，并向本部门和周围的人及群众喊叫报警; 二是组织本单位、部门在场的人员有序地投入扑救工作，充分利用消防栓、灭火器、水桶等器材灭火，不能消极等待消防队到来，而错过灭火良机，力求将火扑灭或控制火势蔓延，不能只顾个人安危而逃离火场

三是大声呼喊请求邻近单位及群众的支援。

四是在组织灭火同时，要立即组织人员疏散和转移物品中，特别昌易燃、易爆物品和易受到火舌威胁的现金、重要凭证要及时转移到安全地点，并派人员守护，确保安全。

五是灭火后要注意保护现场，维护好秩序，以利于消防部门调查分析火灾原因。注意事项：

报警人员报警时要向消防部门讲清楚起火地点、单位、起火的种类和火势大小，报警后即到街道或十字路口迎接、引导消防车辆的到来;扑救人员在消防人员到来后，要立即向消防指挥人员讲清火场内存放有何种物资和贵重物品，火场内是否有爆炸、剧毒物品，并协助消防部门维护好现场秩序。自行扑救火灾时要留心观察火势和环境，防止被火围困、烟气中毒、坠物砸伤等，在确保自身安全的情况下扑救火灾。

第二篇：机房消防应急预案范文

在平平淡淡的学习、工作、生活中，有时会出现一些突发事件，为了控制事故的发展，时常要预先开展应急预案准备工作。那要怎么制定科学的应急预案呢?以下是小编收集整理的机房消防应急预案范文，仅供参考，大家一起来看看吧。机房消防应急预案1

为建立有效防范和处理火灾事故的工作机制，防范消防安全事故的发生，力保消防安全事故发生时能够快速、高效、合理有序地处置，特制定本预案。

一、机房火灾隐患分析由于机房内电气设备多，线路复杂，大部分的火灾都是电气火灾，引发电气火灾的主要因素有：

1、电气线路短路、过载、接地电阻过大等引发火灾。

2、由于机房内的电脑、空调、UPS等设备长时间不间断运行或设备故障引发火灾。

3、静电产生火灾。

4、雷电等强电入侵引发火灾。

二、处置程序

1、发现火情后，迅速切断电源，利用就近灭火器进行灭火，并按照特级事故通报机制进行通报，向领导汇报火灾具体情况。

2、迅速组织相关人员携带消防器具赶赴现场灭火，并听从现场指挥人员指挥。

3、如火情较为严重，应立即与大厦消防中控取得联系，并与之协商处理办法措施，必要时需要专业消防灭火的，迅速拨打119。

4、迅速组织相关人员对重要数据设备进行转移，尽可能保证关键设备安全，引导人员进行疏散。

三、扑救方法

1、电源或线路起火应首先切断电源，绝不能用水扑救。

2、扑救机房设备时，最好使用气体(如CO2)灭火器，干粉，泡沫灭火器会对设备造成腐蚀，使损失增大。

四、注意事项

1、一旦机房发生火灾，应遵循以下原则：首先保证人员安全;其次保证关键设备安全;再保证一般设备安全。

2、火灾发生时，第一发现人查明起火原因，如因电源引起，应首先切断电源。

3、火灾发生后应遵循边救火，边报警的原则。

五、预防措施

1、设备整改：机房现有的电气设备和消防设备均有存在不合理之处，需要整改，消除隐患。现有的配电开关为墙上的半埋式家用配电开关，应更换为专业的独立空气配电箱，修改配电柜各类闸刀和开关的布局，使其具备独立切换的功能。现有的灭火器为干粉灭火器，且维护也已过期，干粉灭火器虽然可以有效灭火，但是会对设备造成腐蚀，损坏设备，应更换为气体灭火器。

2、每天定时对机房重要电气设备和电子设备的温度进行了监控，能够及时地发现并消除隐患。

3、应组织相关人员进行消防安全教育，学习消防知识，学会正确使用各种灭火器，有计划的进行相关的消防演习。机房消防应急预案2

机房建设消防规范：

机房消防系统要求根据国内外实际经验要求使用七氟丙烷(FM200)气体灭火系统，安装时各种管道及阀门必须按照国际标准执行，投标时要求注明各种附件的规格，安装结束后，必需经相关消防部门验收合格。

(1)整体机房应设火灾自动报警系统，并应符合现行国家标准《火灾自动报警系统设计规范》的规定。

(2)整体机房必须设置火灾报警装置，报警装置安装在值班人员随时可以发现的位置。

(3) 主机房的消防系统按要求分成三个消防区，即天棚吊顶上方为一区，机房空间为二区、活动地板下为三区，在每个消防区内应按相关要求设置烟、温感探测器和灭火气体。

1、机房建筑规定：

机房主体结构应具有耐久、抗震、防火、防止不均匀沉陷等性能，变形缝和伸缩缝不应穿过主机房，室内顶棚上安装的灯具、风口、火灾探测器及喷嘴等应协调布置，并应满足各专业的技术要求，机房围护结构的构造和材料应满足保温、隔热、防火等要求。

机房的耐火等级应符合现行国家标准《高层民用建筑设计防火规范》、《建筑设计防火规范》及《计算站场地安全要求》的规定，当机房与其它建筑物合建时，应单独设防火分区机房的安全出口，不应少于两个，并宜设于机房的两端，门应向疏散方向开启，走廊、楼梯间应畅通并有明显的疏散指示标志，主机房、基本工作间及第一类辅助房间的装饰材料应选用非燃烧材料或难燃烧材料，电子计算机机房内的给排水管道应采用难燃烧材料保温。

2、机房的消防与安全规定：

机主机房、基本工作间应设二氧化碳或卤代烷灭火系统，并应按现行有关规范的要求执行，机房应设火灾自动报警系统，并应符合现行国家标准《火灾自动报警系统设计规范》的规定，报警系统和自动灭火系统应与空调、通风系统联锁。空调系统所采用的电加热器，应设置无风断电保护，机房的安全设计，除执行本章的规定外，尚应符合现行国家标准《计算站场地安全要求》的规定，用于非常重要的场所或发生灾害后造成非常严重损失的机房，在工程设计中必须采取相应的技术措施。

3、消防设施与安全措施：

设置二氧化碳或卤代烷固定灭火系统及火灾探测器的机房，其吊顶的上、下及活动地板下，均应设置探测器和喷嘴，主机房宜采用感烟探测器，当设有固定灭火系统时，应采用感烟、感温两种探测器的组合，当主机房内设置空调设备时，应受主机房内电源切断开关的.控制，机房内的电源切断开关应靠近工作人员的操作位置或主要出人口，主机房出口应设置向疏散方向开启且能自动关闭的门。

并应保证在任何情况下都能从机房内打开，凡设有卤代烷灭火装置的电子计算机机房，应配置专用的空气呼吸器或氧气呼吸器，机房内存放废弃物应采用有防火盖的金属容器，机房内存放记录介质应采用金属柜或其它能防火的容器，根据机房的重要性，可设警卫室或保安设施，还有电子计算机机房应有防鼠、防虫措施。

4、机房管理人员必须做到以下规范：

加强消防管理，防止火灾危害，保护机房、人员的生命财产安全，机房管理人员要熟悉消防法规、消防工作管理制度及应急措施，熟悉消防重点部位的布局、建筑特点、防火区域及疏散通道走向、消防设备的配置情况，熟悉并掌握各类消防设施的使用性能和操作方法，还要对管理范围内的各种消防设施、器材进行检查，确保设施、器材的完好有效，发现设备故障时，应及时报告，定期对机房供电线路及照明器具进行检查，防止因线路老化短路造成火灾，严禁携带易燃、易爆、易碎、易污染、强磁、有毒物品等危险品进入机房，认真巡视检查，做到人走关窗、断电、锁门。

初期火灾扑救，必须掌握一定的灭火技能，遇火情时应积极扑救，及时向报告消防安全工作领导小组和消防中心报警，并保护好现场。

机房管理人员必须对消防设施、器材维护管理：

1、消火栓不应被遮挡、圈占、埋压。

2、机房管理人员对机房消防设施、器材要加强维护保养，确保其完好无损。

3、发现异常情况，遇到有人破坏，要马上采取措施并报告报告消防安全工作领导小组，不得延误。

4、灭火器应保持铭牌完整清晰，保险销和铅封完好，应避免日光曝晒、强辐射热等环境影响，灭火器应放置在不影响疏散、便于取用的指定部位，并摆放稳固，不应被挪作它用、埋压或将灭火器箱锁闭。

机房消防应急预案措施：

为确保机房安全与稳定，以保证正常运行为宗旨，按照“预防为主，积极处置”的原则，本预案适用于机房存在的重大火灾隐患和因各种原因发生的火灾事件等。

机房火灾预防措施：

1、走廊、楼梯等公共部位严禁堆放物品，保持通道畅通。

2、机房全体人员应有高度的防火意识，禁止在机房内存放易燃易爆物品，禁止在机房内吸烟或使用明火，禁止在机房内乱拉电线。

3、消防器材由专人负责保管，定期检查消防器材。未经许可，禁止擅自移动。

4、每月进行一次电源开关、电器和线路的检查，发现故障、老化、破损、绝缘不良等不安全因素，必须及时报修，并做好记录备案，消除安全隐患。

机房火灾处置：

1、确认机房设备区域火情后，根据现场情况实施机房区域气体灭火操作。

2、消防应急指挥小组进入现场，开展灭火救援行动。在消防人员未到达火灾现场时，应打开应急通道，组织现场无关人员有序疏散，并派人及时切断电源，隔离火灾危险源和重要设备，充分利用中心消防器材进行灭火。机房发生火灾，应遵照下列原则：首先保人员安全;其次保关键设备、关键数据安全;三是保一般设备安全。

3、协助消防员灭火。在自救的基础上，当专业消防队到达火灾现场后，火灾事故应急指挥小组要简要的向消防队负责人说明火灾情况，听从消防队的指挥，并全力支持消防队员灭火。

4、机房消防与大楼值班室相连接，值班人员发现报警器报警或发现火情时，应在迅速确认后电话通知大楼监控中心，并根据火情直接报119火警。

5、电话通知应急指挥小组，启动应急预案。报告后，应根据火势情况，向周围人员发出火警信号。

机房火灾后处理方案：

1、火灾消除后，应将抢运的设备物资放置在安全场所，并登记造册，计算火灾损失。

2、火灾消除后，对火灾现场进行清理，消除烧毁物资，杜绝火势复燃。

3、灾后值班人员和安全主管人员应配合消防部门和公安部门分析火灾原因，明确火灾责任人。

第三篇：机房消防安全处理应急预案

机房消防安全工作极为重要，一旦发生火灾，将直接影响大厦内设备正常运行，并对人身安全和经济财产造成巨大的损失。为防范消防安全事故发生，保证消防安全事故发生时能够快速、高效、合理有序地处置，特制定本预案。

一、电气火灾的主要因素

1.电气线路短路、过载、接地电阻过大等引发火灾。

2.由于机房内设备长时间不间断运行或设备故障引发火灾。

3.静电产生火灾。

4.雷电等强电入侵引发火灾。

二、处置程序

1.发现火情后，迅速切断电源，利用就近灭火器进行灭火，并按照特级事故通报机制进行通报，向领导汇报火灾具体情况。

2.迅速组织相关人员携带消防器具赶赴现场灭火，并听从现场指挥人员指挥。

3.如火情较为严重，应立即与大厦消防中控取得联系，并与之协商处理办法措施，必要时需要专业消防灭火的，迅速请示领导拨打119。

三、注意事项

1.一旦机房发生火灾，应遵循以下原则：首先保证人员安全;其次保证关键设备安全;再保证一般设备安全;救火过程中应边救火，边报警。

2.火灾发生时，第一发现人查明起火原因，如因电源引起，应首先切断电源。

四、预防措施

1.对机房内电气设备定期检查。发现存在问题的设备及时维修，消除安全隐患。

2.每天定时对机房重要电气设备和电子设备的温度进行了监控，能够及时地发现并消除隐患。

3.应组织相关人员进行消防安全教育，学习消防知识，学会正确使用各种灭火器，有计划的进行相关的消防演习。

第四篇：机房消防安全处理应急预案

机房消防安全工作对于公司运营极为重要，一旦发生火灾，将直接导致公司业务中断，严重影响公司的安全稳定，并造成巨大的经济财产损失。为建立有效防范和处理火灾事故的工作机制，防范消防安全事故的发生，力保消防安全事故发生时能够快速、高效、合理有序地处置，特制定本预案。

1.机房火灾隐患分析

由于机房内电气设备多，线路复杂，大部分的火灾都是电气火灾，引发电

气火灾的主要因素有：

1.电气线路短路、过载、接地电阻过大等引发火灾。

2.由于机房内的电脑、空调、UPS等设备长时间不间断运行或设备故障引发火灾。

3.静电产生火灾。

4.雷电等强电入侵引发火灾。

2.处置程序

1.发现火情后，迅速切断电源，利用就近灭火器进行灭火，并按照特级事故通报机制进行通报，向领导汇报火灾具体情况。

2.迅速组织相关人员携带消防器具赶赴现场灭火，并听从现场指挥人员指挥。

3.如火情较为严重，应立即与大厦消防中控取得联系，并与之协商处理办法措施，必要时需要专业消防灭火的，迅速拨打119。

4.迅速组织相关人员对重要数据设备进行转移，尽可能保证关键设备安全，引导人员进行疏散。

3.扑救方法

1.电源或线路起火应首先切断电源，绝不能用水扑救。

2.扑救机房设备时，最好使用气体(如CO2)灭火器，干粉，泡沫灭火器会对设备造成

腐蚀，使损失增大。

4.注意事项

1.一旦机房发生火灾，应遵循以下原则：首先保证人员安全;其次保证关键设

备安全;再保证一般设备安全。

2.火灾发生时，第一发现人查明起火原因，如因电源引起，应首先切断电源。

3.火灾发生后应遵循边救火，边报警的原则。

5.预防措施

1.设备整改：机房现有的电气设备和消防设备均有存在不合理之处，需要整改，

消除隐患。现有的配电开关为墙上的半埋式家用配电开关，应更换为专业的独立空气配电箱，修改配电柜各类闸刀和开关的布局，使其具备独立切换的功能。现有的灭火器为干粉灭火器，且维护也已过期，干粉灭火器虽然可以有效灭火，但是会对设备造成腐蚀，损坏设备，应更换为气体灭火器。

2.每天定时对机房重要电气设备和电子设备的温度进行了监控，能够及时地发

现并消除隐患。

3.应组织相关人员进行消防安全教育，学习消防知识，学会正确使用各种灭火器，有计划的进行相关的消防演习。

第五篇：机房应急预案

主机运维应急预案简介

. 崔志昂上海超级计算中心上海 201203 zacui@ssc.net.cn . 魏玉琪上海超级计算中心上海 201203 yqwei@ssc.net.cn 引言：

高性能计算技术及应用水平已成为显示综合国力的一种标志。高性能计算机持续不间断地为用户提供高性能计算服务，而运维应急预案是主机运行中处理突发事件的依据和方法，是主

机系统稳定运行的保障。本文简要介绍上海超级计算中心主机运维应急预案，供同行参考。

1. 主机和运维管理制度简介

超级计算机是功能最强、运算速度最快、存

储容量最大的一类计算机。目前只有少数国家掌握研发技术，系统造价非常昂贵，多用于国家高科技领域和尖端技术研究，是国家科技发展水平和综合国力的重要标志。上海超级计算中心作为上海信息港主体工程之一，国家和上海市政府投资先后引进神威-I超级计算机、神威-64P集群计算机、曙光 4000A超级计算机系统并投入商业化运行。

上海超级计算中心自2001年正式开通至今，

这些高性能计算机系统已安全、稳定运行七年多时间，上机用户取得了丰硕的科研成果和社会效益。在这七年中，为保障这些高性能计算机系统安全、稳定、不间断地运行，技术支持部在中心引进第一台高性能计算机--神威-I超级计算机系统的同时，建立了机房应急预案、运行记录、设备运行参数等基础运维制度，在二期引进曙光4000A超级计算机系统过程中，不断完善原有运维制度，并针对该主机系统特点编写了大量操作方法和应急预案。

中心自2006年获得ISO27001(BS7799)信息安全认证以来，技术支持部根据其要求规范了文档体系建设，形成了机房管理制度、应急预案、操作方法、运行情况记录的四大类运维文档。

正是这些运维管理制度的不断完善和有效执行，才确保了资产价值高、服务对象广、社会影响大的中心主机系统安全、稳定运行，保障重点项目、用户服务的连续性。

2. 应急预案重要性

上海超级计算中心机房运维管理文档划分为机房管理制度、应急预案、操作方法、运行记录共四大类(如图1所示)。

图1 应急预案分类

应急预案在应急系统中起着关键作用，它明确了在突发紧急情况发生之前、发生过程中以及刚刚结束之后，谁负责做什么、何时做，以及相应的策略和资源准备等。它是针对可能发生的重大事故，按照其影响和后果严重程度，在应急准备、响应、操作各个方面预先做出的详细安排，是开展及时、有序和有效事故应急工作的行动指南。因此，应急预案在这四类运维管理文档中处于最为重要的地位。

3. 应急预案分类

应急预案按重要性和事件种类，可以划分为消

防预案、断电预案、空调预案、其他预案共4种，预案各文档之间彼此独立又互为关联，具有非常强的可操作性。制定预案的指导原则是尽一切可能，最大限度地确保向用户提供的服务不中断。在紧急事件发生的情况下，保证核心设备连续运行，避免存储数据丢失。在事件处置完成后，能快速恢复高性能计算服务。

3.1 消防预案

消防预案是主机房最重要的应急预案。该类预案根据《上海超级计算中心灭火和应急疏散预案》的原则并结合主机房主机设备和消防设备的运行特性而制定。主要由《主机房消防应急预案》和《主机房气体喷淋消防系统启动撤离及处置应急预案》 2个文档组成。

消防应急预案：该预案着重规范了火警事件发生后，所有主机维护人员如何根据所属区域和现场情况，判断和选择正确的处理方法，同时配合中心物业人员处置，降低事件带来的影响。

对于设备发生烟雾，主机维护人员协同物业人员寻找烟雾点予以切断相关区域电源;当设备发生可以控制火情，协同物业人员灭火;当主机房发生火灾而无法控制，应采取施救方法等措施。

气体喷淋预案：该预案描述主机房气体喷淋系统启

动的响应和确认并具体规定了撤离机房路线、善后处置。

这两个预案中，消防应急预案作为消防预案

的主体，涉及到如何处理与消防有关情况的各个方面。气体喷淋预案是主机房发生重大火灾时应对的最终灭火手段和人员撤离引导方法。

3.2 断电预案

断电预案的重要性仅次于消防预案。该类预

案根据中心供配电系统实际情况和各种断电影响范围下对主机运行的最小保障要求而制定的。主要由

《主机房断电应急预案》、《曙光4000A超级计算机系统紧急关机操作方法》、《曙光4000A超级计算机系统双路断电关机操作方法》等多个文档组成。

主机房断电应急预案：该预案用于断电情况

下，主机维护人员如何与中心物业部门联系控制主机房供电情况，并且负责对主机系统运行受断电影响程度做出正确判断。指导维护人员按影响程度，分别选用预案中对应的操作方法。本预案在所有断电预案中起指导思想作用。紧急关机操作方法：该预案制定了主机系统在紧急情况下，最快速度关机的操作步骤。主要用于发生烟雾、明火或消防、断电预案需在数分钟内关机断电的事件。

双路断电关机操作方法：该紧急操作预案主要用于在外界双路供电全部中断情况下的操作。

该预案的关机原则是：根据实际电力供应考虑操作步骤，宁慢勿快，在时间允许的情况下，最大程度保证存储节点、SAN和SCSI存储设备、工程用户的计算节点的运行，尽可能减少关闭范围，以确保能在恢复供电的情况下，主机尽快恢复正常运行状态，减少影响范围。

3.3 空调预案

超级计算机系统在运行中消耗大量电能，在

提供高性能的计算能力同时产生大量的热量，必须采用专用空调系统，以保持主机系统适当的温、湿度、空气洁净度等运行环境需求。因此，专用空调系统与主机系统密切相关，空调预案是主机房必备的应急预案。

制定该预案的原因在于，断电情况下，空调与主机系统存在互相牵制的现状。主机和空调系统均为外界双路供电，主机系统配有UPS不间断电源系统，而空调系统无UPS支持。在双路停电情况下，主机系统可获得UPS电池组支持运行若干分钟，空调系统无UPS支持只能停机。由于在无空调冷却情况下，主机系统会在短时间内积聚大量热量导致超过运行警戒温度，主机系统在有可供电余量的情况下，仍将被迫关机。因此，确保空调中断情况下的主机运行环境是该预案的制定原则。

预案根据各台主机配备的空调系统特点制定，由《曙光机房空调系统故障应急预案》和《神威机房空调系统应急预案》2个文档组成，这里仅介绍曙光机房空调系统应急预案。

该预案的第一步：考虑增强主机系统散热效

果，采用打开主机机柜前后门，和机房周边木门，在通风道上布置有UPS支持的应急风扇，形成空气对流，带走热空气，从而增强主机系统散热效果，降低升温速度。

该预案的第二步：在采取上述措施并持续升温到一定温度之上的情况下，考虑紧急关闭部分或全部计算节点，减少热量生成，确保主机系统的核心存储和网络系统不受影响，确保空调系统修复后，主机系统能快速恢复运行。

3.4 其他预案

除了固定的三类预案之外，技术支持部还根据主机系统实际运行中出现的各种意外情况，随时制定具有针对性的预案。

如《大楼顶棚坍塌应急操作方法》的制定，就

是由于2008年1月连续发生雨雪等灾害性天气，中心大楼顶棚大量积雪且难融化，物业预计存在情况继续恶化，有发生顶棚坍塌事故的可能，一旦发生将影响一楼主机运行。

针对该突发的隐患，中心技术支持部制定应急操作方法，对维护巡查频度范围、漏水可能发生位置、如何处理受漏水影响的主机设备等操作步骤进行严格界定。即使在最后，中心大楼顶棚经受住灾害性天气的考验，该预案并未发挥作用，这正体现了应急预案的备而不用的特点。而且通过各种意外

情况的迅速分析、应对和实践操练，不断锻炼主机维护队伍，使之走向成熟。

4. 在实际案例中，应急预案的作用

在主机系统年复一年的运行中，我们希望这些设备正常稳定运行，应急预案永远不会被使用，然而在实际运行中，总免不了因突发事件执行应急预案。

而每次突发事件是检验应急预案制定是否科学、有效的最好证明。

4.1 双路断电，UPS正常运行案例

2006年8月某天，因打雷导致供电一路跳闸自动换至另一路供电，曙光机房2台空调掉电。

主机维护人员立即按应急预案操作，电话通知物业人员恢复空调运行，恢复过程中所有空调相继出现高温报警，机柜液晶屏平均温度35度，开启全部曙光机柜前后门，打开神威-曙光玻璃门并调集应急电扇，于12:45恢复正常。

12:50再次出现双路供电中断，曙光空调因无

UPS支撑全部断电，启动断电应急预案，开启

5、6号木门，开启神威机房全部空调，布置电扇，将冷气导入曙光机房，热量从6号木门的外部通道排出，选择性杀除部分作业，至13:05供电恢复，曙光空调开始工作，13:20环境恢复正常。全机在此过程中，正常运行未停机，只损失了部分不重要的作业。

4.2 单路断电，UPS失效案例

2007年8月某天，因低压配电柜开关至UPS房间 X-JM柜电缆发生相对地短路，造成UPS机组逆变器自身保护动作，关闭UPS机组，导致曙光主机系统失电。

全机掉电后，主机维护人员迅速按应急预案

手工关闭所有电源开关。1 0 : 3 0恢复供电，温湿度恢复正常后，全机加电，恢复过程中修复

storage00

1、00

5、010三个盘阵的9个用户文件系统，修复15个节点加电故障，除cnode00

9、anode029电源

环境模块故障，于当日15:10全机系统恢复正常。

由于处置及时，主机受影响范围很小，在恢复供电后数小时即成功开启全系统。

5. 随时保持应急预案的适用性

主机长年累月的运行，故障和问题的发生，往往是必然的，也是客观、无法回避的。因此，要求在维护工作中，预先考虑到可能的问题和故障，制定完善的应急预案。应急预案不可能包含所有的故障和问题，但应根据维护经验，尽可能地设想各种危机情况下的处置措施。做到预想到各种可能的问题。

而在形成应急预案后，更重要的是持续地在

运行中加以完善、测试和演练，尽可能模拟实际情况，做到即使只有1名维护人员在场，也能在真正发生危机时，以最短时间独立处置故障。

以目前中心的主机运维工作为例，三年内，仅断电预案就已根据实际运行情况的变化，制定并更新了5~6个版本，针对夏季突发断电也有专用预案。这样的措施，直接保障了2006年8月突发断电事件中的主机连续运行。而2007年8月的突发断电事件中，由于预案在之前刚根据实际情况进行过演练和修改，主机维护人员仅用半小时就完成所有应急操作动作，整机仅有个别设备故障，确保了主机设备未因突发断电而发生大范围损坏现象，恢复供电后直接完成开机。

实践证明，完善而适用的应急预案能保障向用户提供稳定的高性能计算服务。

6. 结束语

完备而适用的应急预案能有效降低主机系统因意外事件发生带来的运行风险，对可能发生的意外来说，是一种事前防范措施。但对整个主机系统产品而言，是一种事后防范措施。如果主机系统生产厂商能把这些防范措施纳入整个系统设计过程中，使操作方法更加简便、更趋于人性化，这将帮助主机维护人员更为妥善处理意外事件，用户得到更为稳定的高性能计算服务。我们相信未来国产的高性能计算机能做到这一点，期待着这一天早日到来。

(为帮助了解，特在附录中节选部分双路断电关机预案内容)

附录：《曙光4000A超级计算机系统双路断电关机操作方法》(省略具体操作步骤)

曙光4000A超级计算机系统双路断电关机操作方法

注意：

1、本方法专用于主机房发生双路同时断电紧急操作使用。(包括单线断电切换失败)。

2、本方法作为《曙光-4000A超级计算机系统紧急关机操作方法》(SSCS(TS)-XXXX-XXXX-XXXX)的附件。

1. 断电确认及操作：

主机房内一旦发现断电，并接物业明确通知为双路断电，首先执行如下操作(即确保节点温度)：

1.1 打开机房门便于散热，..

1.2 机房通道上布置应急风扇加强冷热空气对流，夏季：应急风扇布置..;冬季：应急风扇布置..，使曙光

机房的温度尽量降低。

1.3 打开所有机柜前、后门。