提高核心机房巡查实时率

中国联通广州市分公司0核心局房巡查实时率提升降本增效QC小组中国联通广州市分公司1目录一、QC小组介绍........................................................................................................2二、选择理由...............................................................................................................3三、现状调查...............................................................................................................4四、活动目标...............................................................................................................6五、原因分析...............................................................................................................8六、要因确认...............................................................................................................9七、制定对策.............................................................................................................11八、对策实施.............................................................................................................12九、效果检查.............................................................................................................14十、巩固措施................................................................................错误!未定义书签。十一、总结和计划.......................................................................................................15中国联通广州市分公司2核心机房巡查实时率提升降本增效QC小组一、QC小组介绍(一)小组概况降本增效小组成立于2010年11月，围绕国家节能减排政策，落实广州联通降本增效运营理念，致力于降低公司系统网络运营成本，提升网络质量，提升公司效益。活动人员涵盖省市分公司领导、专家、机房运维骨干，8名组员中8人为大学本科以上学历，其中硕士研究生2人。表1小组概况小组名称降本增效QC小组成立时间2010年11月小组口号降本增效·沃领先锋小组人数12人活动频次1次/月活动时间2013年1-11月活动课题核心机房巡查实时率提升注册号CU-GUANGZ-2011-002课题类型现场型表2小组顾问及成员序号姓名文化程度顾问及组员1连凯大学本科组长2黎达宇大学本科副组长3唐应环大学本科顾问4李茂勇大学本科顾问5罗绵辉大学本科组员（技术骨干）6薛星刚大学本科组员（技术骨干）7吕柏文大学本科组员（技术骨干）8闫芳进大学本科组员9李威大学本科组员10姚本任大学本科组员11宋广浩大学本科组员12刘晓庆大学本科组员中国联通广州市分公司3(二)名词解释核心机房动力巡查是及时发现机房动力故障以及确保机房安全的一种重要手段。实时巡查完成率=实际已按时巡查点/应按时巡查的点*100%（时时率越接近于1，则表明核心局房按时完成巡查越完全）节能减排：节约能源、降低能源消耗、减少污染物排放。降本增效：降低成本,增加效益。(三)进度计划活动制度：每月开展一次QC会议，总结阶段进展和成果，布置下阶段任务。二、选择理由巡查的目的：及时查找、发现动力系统设备设备隐患，排除故障。巡查要求：1、检查机房供电状况，UPS和直流开关电源系统工作情况、指示状态，网络设备运行情况；2、检查机房空调系统工作状态，机房温度；根据活动前5个月核心局房巡查记录数据统计分析显示，核心局房动力值班人员巡查时实率较低，存在漏查、误时巡查、弄虚作假等现象，未达到巡查的目的。由于人工巡查的漏查，2009年工业园机房因市电低压开关跳闸，导致IDC核心机房UPS蓄电池放电容量耗尽仍未发现低压开关跳闸，造成了IT设备停中国联通广州市分公司4电宕机的严重故障。为了提高巡查时实率，保证核心局房动力系统安全运行，最大化避免故障的出现风险，现对巡查按时完成情况实行时时监督的手段。图1-1核心机房人工巡查时实率基于以上情况，QC小组会议讨论一致决定以“核心局房巡查实时率提升”作为本次QC活动的选题。三、人工巡查调查巡更系统是实现监督管理巡逻人员是否按规定路线，在规定的时间内，巡逻了规定的数量的巡逻地点的最有效的、最科学的、技防与人防相协调一致的系统；其主要特点可助提高巡逻工作人员的责任心、积极性，及时消除隐患，防患于未然。电子巡更系统是安全防范技术体系中的一个重要组成部分，是一种先进的综合性管理体系，它要求巡逻人员及时准确地到位，同时它又把巡逻人员巡逻的全部或部分情况记录下来，并为日后对某些突发事件的处理提供了方便的条件及重要的依据。电中国联通广州市分公司5子巡更系统要求巡逻人员及时准确的到位。因为只有人员的及时准确到位，才可以对损坏及破坏行为进行快速反应，同时对破坏分子也有强大的心理威慑作用；而人员的及时准确到位又能及时发现隐患，预防破坏，减少事故，所以它是对社区治安进行巡逻的一个很重要的预防手段。由此通过对社区进行定期的巡逻以保证社区的正常运行显得尤为重要。QC小组通过调查，通信业其他公司通信机房均有巡查要求，基本是以巡查记录或是查看监控手段为主，并没有较好的巡查电子系统，广州联通率先引用电子巡查系统，更好的按要求完成巡查。小组对广州联通核心局房的人工巡查率情况进行了收集调查，调查结果如下:图1-2广州核心局房房人工巡查率小组对2012年8月至2012年12月广州联通核心机房人工巡查完成情况进行统计分析。中国联通广州市分公司6图3广州核心局房巡查点百分比分布图从巡查点设置分布图可知，全部巡查点为109个，其中占比较大的机房依次为工业园、云景和750机房。从巡查百分比分布可知，全程巡查占百分比为68.93%，漏巡占百分比为12.5%,作弊占百分比为18.57%。由此，可以得出未及时巡查或漏查占有较大比例，提高核心局房动力系统安全稳定运行，增加故障处理及时率，首先要降低机房漏巡率。四、活动目标(一)目标值通过以上分析，找到机房漏巡的主要原因。我们设定本次活动的目标为：提升核心局房巡查实时率，实时巡查完成率≥95.00%。中国联通广州市分公司7图4提升核心机房巡查实时率的目标(二)目标值制定依据经过QC小组成员根据对近期5个月的核心局房巡查完成率分析，认为目前核心局房巡查完成率较低的主要原因为人为原因，误时巡查、漏巡查占比达到98%，小组成员经过讨论分析，经过优化措施可解决其中至少97.8%。假设其它原因保持不变，通过理论计算核心机房巡查实时率可达到：1-[（1-68.93%）×97.8%]=99.316≥95.00%因此小组活动制定的目标为95.00%，从理论上是能够实现的。中国联通广州市分公司8五、原因分析针对找到的主要改进内容展开调查，小组成员进行了认真的分析讨论，找出了以下几个原因。图1-5造成巡查时实率低的原因法人机房巡更点过多巡查点设置不合理巡查时实率低人员配置不合理巡查时间不充足巡查线路不合理值班人员偷懒/忘记值班人员未按要求进行巡查巡查时间设置不合理环境机巡查系统故障巡更点故障监督不到位网络不稳定下次系统登录不上在检修设备或故障抢修中国联通广州市分公司9六、要因确认小组成员对以上原因逐一进行要因确认，要因确认表及分析如下。表5要因确认表序号末端原因确认内容确认方法判别标准确认情况负责人完成日期是否要因1人员配置不合理机房巡查时实率低是否是由于机房配置人员不够，没有时间进行巡查分析机房巡查时实率低是由于机房配置人员不够，没有时间进行巡查每个局房配置4名值班电工和一名局房负责人，总共4人进行轮班每个局房配置4名值班电工和一名局房负责人，周一至周五白班有3人值班，夜班和周六日均一人值班，不存在没有时间巡查的情况姚本任、刘晓庆5月10日否2巡更线路设置不合理机房巡查时实率低是否是由于机房巡更的线路设置不合理，存在重复绕道现象分析机房巡查设置线路是否合理是否存在巡查线路过多，重复现象经过分析得出每个局房的巡查点设置都是合理的，巡查路线按常规设置。吕柏文4月20日否3值班人员未按要求按时进行巡查/存在漏点巡查机房巡查时实率低是否是由于值班人员没按时间和地点求进行巡查分析巡查数据，查看实际巡查时间，分析漏查巡查点情况核查是否是在规定的时间范围内进行巡查，核查漏查总结规律经过分析巡查记录数据，存在误时巡查情况，存在单点漏查现象刘晓庆4月20日是4人员偷懒/忘记机房巡查时实率低是否是由于值班人员睡觉偷懒故意不去巡查、或者是忘记了没按时进行巡查分析机房巡查时实率低是否是由于值班人员睡觉偷懒故意不去巡查、或者是忘记了没按时进行巡查检查培训记录和考核制度经核查巡查记录数据，存在整个时间段没有进行巡查的漏查情况比较多姚本任、刘晓庆5月30日是5培训不到位或者缺少考核制度机房巡查时实率低是否是由于没有进行值班要求培训，有无执行考核制度分析核实机房巡查时实率低是否是由于没有进行值班要求培训，有无执对各个机房负责人进行核实，是否存在此类现象很少存在这样的情况，机房每天均有两名电工值班薛星刚5月10日否中国联通广州市分公司10行考核制度6巡更点故障机房巡查时实率低是否是由于巡更点坏了，实际去巡查了而显示没有巡查分析统计损坏的巡查点，看是否事先进行通报巡查点坏巡查点故障率是否过高，存在技术不成熟情况经分析确认，巡查点固定后基本没有故障薛星刚5月30日否7巡更系统存在技术漏洞机房巡查时实率低分析是否是巡查系统软件存在问题，是否是值班人员可以随意修改数据结合门禁刷卡记录，逐个机房进行核实，查看巡查系统记录巡查时间是否与门禁系统进入时间一致经过分析和现场核实，发现有作弊修改数据现象，而实际木有进行巡查罗绵辉、吕柏文5月30日是8无法正常登录巡查系统上传数据机房巡查时实率低分析是否是因为局房的办公网络不稳定，经常存在断网现象，导致巡查数据不能及时上传分析各个机房办公忘了情况分析显示机房办公网络均比较稳定闫方进5月30日否9巡查时间设置不合理机房巡查时实率低分析是否是因为巡查频率太高，导致巡查不及时都是按维护要求进行巡查，两个小时巡查一次，雷雨天气一个小时巡查一次巡查时间为两小时一次，电工与保安的巡查时间错开，中间间隙为1小时吕柏文、姚本任3月10日否10单次巡查耗时过长机房巡查时实率低分析巡查点设置是否过多正常巡查一次是否超过一个小时经过现场按巡查线路进行正常巡查，每个局房完成一次巡查都用时都低于30分钟李威否要因总结QC小组通过以上详细分析，最终确定了以下3个要因：中国联通广州市分公司11七、制定对策1、对策可行性分析小组全体成员针对以上要因，制订详细可操作的对策方案；其