MES系统应用服务器宕机应急处置演练
MES系统应用服务器宕机应急处置演练文|01一线一、编制MES系统应用服务器宕机应急处置预案（可省略）1 目的为了提高井冈山卷烟厂MES系统应用服务器宕机的突发事件的能力，形成科学、有效、反应迅速的应急工作机制，确保重要网络通讯的正常使用，根据《中华人民共和国安全生产法》、国家安全生产监督管理总局《生产经营单位安全生产事故应急预案编制导则》（GB/T29639-2013）的精神和要求，结合《MES系统现场应急处置预案》中网络中断事故实际情况，特制定本预案。2 事故（事件）现场处置方案2.1事故特征序号事故类型事故前可能出现的征兆事故发生的可能时间可能造成的危害程度1MES系统应用服务器宕机非操作员本身意愿造成的重启——如供电(欠压，过载，波动)、震动、硬件质量(热稳定性(热敏度)和抗干扰能力)、资源冲突、系统不完善或瓶颈问题、病毒、灰尘、散热不良……等等原因而造成重启一年四季都可能MES系统无法应用2由于用户访问量过大、数据异常，造成资源耗尽，数据超出系统设定的空间限制范围。3由操作员意向操作的重启——用于维护或更新服务器、部署机房或特殊情况等等2.2应急组织与职责2.2.1应急自救组织形式及人员构成情况由部门领导、系统管理员及网络管理员形成应急小组，其他人员形成事故增援小组。序号名称组成人员1现场负责人部门负责人2指挥员网络管理员、机房管理员3技术组网络管理员、MES系统管理员4通讯联络组部门员工5增援组相关部门电工、相关部门系统管理员及各系统厂家2.2.2相关人员的应急工作职责应急小组工作职责现场负责人a） 负责指挥工单下发不了事件，掌握及评估事件状况，以及采取必要的应急措施。b） 向上级报告事故排查处理情形。c） 接受上级的指令和调动。d） 现场负责人不能到达现场，由其指定代理现场负责人履行职责。指挥员负责现场应急组织工作。技术组技术组人员根据异常提示排查问题，待解决问题后恢复相关数据通信联络组a） 负责应急处置过程的人员、信息的保障。b） 将现场事故处理结果通知各部门。增援组增援技术组，确保系统问题解决后恢复正常运行。2.3应急处置2.3.1事故应急处置程序
2.3.2事故现场应急处置准备2.3.2.1MES系统管理员发现MES系统无法访问的情况，MES系统管理员通过与相关人员进行商议，确定排查方案，对异常进行检修判断；2.3.2.2如MES系统应用服务宕机，需要重启信息系统，网络管理员、MES系统管理员需通知相关的关键用户，暂停使用系统，待重启恢复后通知使用。2.4事故现场处置预案2.4.1 MES系统管理员查看异常现状，判断异常原因，估计现场恢复所需时间，如果恢复时间在30分钟内，则进行异常排查。2.4.2 若现场检修时间超30分钟，应告知其它集控系统、数采系统、高架系统、糖香料系统管理员按各自的系统应急方案进行生产。2.4.3 待系统恢复后，将各项数据重新反馈回MES系统2.4.4 应急处置结束后，MES系统管理员应将事件分析报告，在调查结束后以书面报告部门负责人。2.5 注意事项2.5.1必须保持MES系统管理员、各车间管控系统管理员联系畅通。2.5.2必须确保系统恢复后，MES系统各项数据完整。3附件现场应急组织联系方式序号指挥部职务姓名现任职务电话1现场负责人高级工程师、信息安全管理师XXXXXXXXXXX2指挥员XX系统管理员XXXXXXXXXXX3所有应急组成员何XX、周XX、王XX、朱XX、洪XXXXXXXXXXXXX………………相关部门/单位通讯录(表：内容略)序号单位名称联系电话……………
二、编制MES系统应用服务器宕机应急处置演练方案（可省略）MES系统应用服务器宕机突发事件现场应急演练方案（2020年度）一、目的：检验MES系统应急预案的科学性、有效性、可操作性；检验确保MES系统应用服务器宕机出现事件时，做到信息准确、报告及时、指挥一致、分工明确、工作协调、措施有力、处置得当，保证车间生产计划的准确执行。二、依据：《MES系统应急处置预案》。三、组织：信息管理科负责人主持策划和前期培训与沟通，信息管理科、外包运维相关人员支持和配合工作。3、成立应急自救小组3.1应急自救小组组长：信息管理科科长应急自救小组成员：MES 系统管理员、网络管理员、外包运维人员、各管控系统管理员与MES系统对接人员。3.2职责组长职责：负责组织现场应急救援工作，并向上级报告事故情况。指挥员职责：负责相关人员的协调与沟通工作。其它成员职责：负责参与事故现场的应急处置工作。四：时间：2020年12月17日上午14：30开始五、地点：MES系统应用各环节六、人员：现场演练由罗余作同志指挥。信息管理科系统管理员、网络管理员参加演习。现场演练前，由现场应急指挥给参加演练的人员简要回顾现场的应急处置预案内容，强调各环节注意事项。七、现场应急处置程序2020年12月17日上午，MES系统访问异常。1、报告：MES系统管理员发现MES系统访问异常的情况。――14：30，信息科MES系统管理员点检时发现系统访问异常。2、接报：信息科MES系统管理员获知情况后，确定解决方案：――14：31，何XX立即向应急小组组长罗XX简要汇报事件情况，宣布启用应急方案。――应急小组组长罗余作向厂领导简要报告事件及应急处置方案情况。――14：32，由网络管理员进行网络排查，如果异常则执行计算机房应急处置方案，否则由MES系统管理员进行问题排查。――14：33，由何XX通过远程连接应用服务器进行异常诊断，并配合洪天强远程恢复应用系统。――14：40，何XX测试MES系统访问是否正常。――事件处置：何XX在确保MES系统恢复正常后，由何XX在MES系统里查看各项数据是否完整。――14：43――何XX向应急小组组长罗余作简要汇报事件处置结果。――应急小组组长罗XX向厂领导反馈结果。八、现场应急后勤保障措施1、人员保障演练人员全部就位，如有特殊情况需要提前一天告知信息科。2、工具保障网络管理员要保障网络通讯正常。九、注意事项1、必须优先保证车间的生产要求。2、各部门关键用户要及时配合，手机要保持通畅。3、功能恢复后，将数据进行恢复。2020年12月17日
三、MES系统应用服务器宕机应急处置演练记录现场应急处置演练纪录编号： 日期：2020年12月17日演练部门信息管理科演练地点MES系统各相关现场演练名称MES系统应用服务器宕机指挥人罗XX参加人：罗XX 何XX 周XX 王X 朱X 彭XX 洪XX演练过程：2020年12月17日上午，MES系统访问异常。1、报告：MES系统管理员发现MES系统访问异常的情况。――14：30，信息科MES系统管理员点检时发现系统访问异常。2、接报：信息科MES系统管理员获知情况后，确定解决方案：――14：31，何XX立即向应急小组组长简要汇报事件情况，宣布启用应急方案。――14：32，由网络管理员进行网络排查，如果异常则执行计算机房应急处置方案，否则由MES系统管理员进行问题排查。――14：33，由何XX通过远程连接应用服务器进行异常诊断，并配合洪天强远程恢复应用系统。――14：40，何XX测试MES系统访问是否正常。――事件处置：何XX在确保MES系统恢复正常后，由何XX在MES系统里查看各项数据是否完整。演练存在的问题及整改措施：1、存在的问题现场人员演练紧张度不够，演练前培训不到位、沟通效率低。2、整改措施增强应急处置的责任意识，加深应急方案的培训力度，提高响应紧张程度，为提高沟通效率，建立一个MES系统用户微信群，提高业务技能以增强应急处置能力，修订更新应急处置预案，认真对待并培训熟悉每个现场处置细节。演练指挥人签字：罗余作评价人签字：罗余作现场应急预案处置演练评审记录编号：JY-AB-021 日期：2020年12月17日演练部门信息管理科演练地点各现场演练名称MES系统应用服务器宕机指挥人罗余作参加人：信息管理科：罗XX 何XX 周XX 王X 朱X 彭XX 洪XX效果评价及完善意见：1、效果评价在这次演练活动中，使我们对井冈山卷烟厂MES系统现场应急处置突发事件有了一定的认识，并积累了一些经验，为以后应对MES系统突发事件打下一定的基础，分析这次演练活动的经验和教训，我们认为首先要加强演练前的培训力度与提高相关用户的沟通效率，其次是多增加一些排查工具的使用培训，提升相关的排查效率。2、完善意见平时各相关岗位人员加强学习和练习应急操作程序，熟悉突发事件发生时应对方法，加深应急方案的培训，要求要提高响应时间，建立一个MES系统相关的用户微信群。评价人签字：罗余作2020年12月17日附件1：现场演练实况（一）、演练准备：应急预案演练准备工作：确定人员到位和分工情况，学习了解演练目的、要求，确认演练流程。
（二）、演练开始：1、MES系统管理员发现应用服务器异常。
2、系统管理员与网络管理员进行网络软硬件排查，并向应急指挥小组成员和应急组长汇报情况。应急组长接报后向厂部分管生产的领导汇报。
3、运维人员就位，应急指挥小组组长宣布启动应急处置预案，进行故障排查并对故障进行处理。
4、故障处理完毕，应急指挥小组成员共同检验效果，同时，应急指挥小组组长向分管厂领导报告现场处置结果。
5、演练结束。（三）、演练总结：对演练过程中发现问题进行归纳、总结，进一步完善预案。
（四）、预案的持续改进：将演练总结中提出的几点的意见修改完善预案。
四、MES系统应用服务器宕机应急处置演练报告MES系统应用服务器宕机应急处置演练报告（2020年12月17日）一、应急演练目的为保障江西中烟井冈山卷烟厂MES系统的正常运行，通过应急处置演练，检验应急预案的科学性、实效性和操作性，提高应急保障队伍响应速度。二、应急演练原则1、真实性原则：实战演练的内容与实际发生的业务无偏差，具有实用性。2、着眼实战，讲求实效。以提高应急救援指挥人员的指挥协调能力、应急队伍的实战能力为着眼点。重视对演练效果及组织工作的评估、总结、及时整改存在的问题。3、精心组织，确保安全。围绕演练目的，精心策划演练内容，科学设计演练方案，周密组织演练活动，确保活动规范、有序、高效。三、应急演练工作要求1、严格按时按要求完成实战任务。2、实战过程中发现问题，对问题进行准确清晰描述，并按问题清单格式做好问题记录。3、实战内容完成后，由应急执行小组组长向应急指挥小组组长汇总实战情况，对实战执行情况进行分析，形成实战演练报告。四、应急演练职责分工1、应急指挥小组：组长：罗余作指挥员：罗余作（兼）组员：何XX /周冬卫/王丹/朱明/彭小红/洪天强——负责应急指挥、组织协调和过程控制；——在应急处置过程中统一对外发布信息；——宣布应急响应状态的解除；——报告应急处置进展情况，总结相关工作。2、应急执行小组：组长：何XX组员：周XX/洪XX——报告应急处置各个环节情况；——进行应急处置相关工作；——应急恢复后数据恢复，完善处置程序。五、应急演练准备1、进行演练培训。相关人员按应急处置流程简述处置办法，熟悉演练方案和网络通断测试方法、执行流程。2、搭建演练环境。——模拟井冈山卷烟厂，MES系统访问异常情况。——通讯保持联系，及时说明进度与问题，便于掌握演练情况，发现演练中存在的问题。六、演练关键环节（一）发现与记录：1、 生产过程中，MES系统管理员发现MES系统访问异常，应向应急指挥小组通报情况。2、 应急执行小组人员确认情况，进行确认并向应急指挥小组组长报告，并做好记录。（二）报告与紧急处置：3、 应急指挥小组应急执行人员对故障进行诊断、分析，找出根本原因。4、 应急执行小组人员就位，向应急指挥小组报告故障诊断结果和故障处置办法。5、 应急指挥小组组长按应急预案通知有关人员就位进行应急处置。（三）处置：6、 应急执行小组按应急预案搭建处理环境。7、 应急执行小组查找故障源，进行相关处置。8、 应急执行小组人员向应急指挥小组组长、指挥员报告应急处置结果。（四）恢复：9、 应急执行小组组长确认完成应急处置。10、 应急指挥小组组长、副组长检查处置情况，下达恢复指令。七、应急演练记录演练日期：2020年12月17日序号时间项目过程图片记录114:25应急预案演练准备工作：确定人员到位和分工情况，学习了解演练目的、要求，确认演练流程
214:30（演练开始）MES系统管理员发现应用服务器异常
314:32系统管理员与网络管理员进行网络软件排查
414:33硬件排查
514:34向应急指挥小组成员和应急组长汇报情况
应急组长接报后向厂部分管生产的领导汇报。
614:35维人员就位，应急指挥小组组长宣布启动应急处置预案，进行故障排查并对故障进行处理。。
14.36故障处理完毕，应急指挥小组成员共同检验效果，同时，应急指挥小组组长向分管厂领导报告现场情况。
14:37
14:38
714:39演练结束，对演练过程中发现问题进行归纳、总结，进一步完善预案。
814:40（演练结束）八、应急演练小结1、本次演练针对井冈山卷烟厂MES系统访问异常情况。此次活动从预习到正式演练历时10分钟，演练了方案中规定的程序和涉及内容。其中，现场应急处置过程实际耗时5分钟，演练时间节点和过程都记录备案。2、本次应急演练，按计划顺利完成演练任务，通过本次实战演练，可以综合判断MES系统运行稳定有效。在实战演练的过程中，发现现场人员演练紧张度不够，反应不够迅速，演练前培训还不深、沟通效率低,建议建立一个MES系统相关的用户微信群,相关信息在群里通知，以提高应急效率。事后现场由信息科罗XX科长强调了应急处置的责任意识，要求要提高响应时间，提高应急能力，更新演练方案，认真对待每个现场处置细节。3、本次演练检验了应急方案（预案）的科学性、实效性和操作性，MES系统应用服务器宕机应急处置应急自救小组和各相关岗位人员平时应加强学习和练习应急操作程序，熟练掌握系统遭遇突发事件时的应对方法。为保障江西中烟井冈山卷烟厂MES系统的正常运行打下了一定基础。
作者声明：——本文系作者原创，转载请注明！另外，本文仅代表个人观点，若作品中的文字、美术、摄影等有涉及您的版权问题，请您及时与我取得联系，我将会在第一时间删除转载内容或作品！
作者简介：罗余作，男，汉族，1965年11月出生，江西吉安永和人，中共党员，高级工程师，网络与信息管理师，2019年中国优秀CIO获得者，高峰论坛特邀嘉宾，中国知名专家学者，著名科技工作者。长期从事设备技术、企业管理、网络与信息技术。个人辞条列入大型文献《走进大家》、《中国知名专家学者辞典》、《世界优秀专家人才名典》、《百度百科》、《世界名人录》等大型文献。2018年进入吉安县诗词学会理事会，担任学会理事和期刊《文山艺苑》编委，吉安市庐陵诗词学会会员，吉安市吉州区诗词楹联学会会员；2019年4月13日当选吉安县文学协会副主席，担任协会期刊《庐陵文苑》编委。2020年荣获中国乡村作家荣誉称号。