数据中心基础设施运维常规工作介绍-程序员宅基地

技术标签: python  java  运维  人工智能  大数据  

695cf49085ce40b58314ee7ecab8e2da.gif

更多专业文档请访问 www.itilzj.com

 随着互联网、云计算需求的爆发式增长,数据中心的规模不断扩大,稳定、能耗、占地等问题持续困扰着数据中心运营者,维护、持续扩容等新的问题接踵而来。为了应对挑战数据中心的形式也在不断的变化。从早期的集中供电集中制冷到分布式供电分布式制冷,从机柜摆放方向的简单调整到封闭冷/热通道,从简单划分功能区的数据中心到现在流行的微模块数据中心。今天我们来了解一下数据中心常规运维工作的重要性并通过下文介绍熟悉数据中心常规运维的工作内容。

一、 运维常规工作重要性

445f9b0b953ead621a9cd65b6e76f387.png

运维工作面临的挑战

  • 功率密度升高,给运维人员反应的时间更短,管理难度加大。

  • Uptime报告显示,数据中心超过70%的故障由于人为操作失误造成。

1、主要故障类型:

  1. 磨损所致

  • 设备也有生命现象,累计达到某一使用程度之后,就寿终正寝,想修都没得修,只有更新换代,这一点在高精密的设备上表现的最明显。

  • 设备的磨损可分为有形磨损和无形磨损二种。有形磨损是指:设备在使用过程中发生的物质磨损或由于环境自然侵蚀而造成的物理、化学变化。无形磨损是指:由于科学技术的进步,使得设备的使用价值降低,甚至被淘汰。

  2. 异常操作所致

  • 几乎所有的设备的动作顺序都有严格的要求,由不得你随意操作,不遵守操作规程,只会直接导致或加速其产生故障。现场管理活动中,未熟练的新人,错误的操作、设定,都是损坏设备的最直接的“杀手”。

  3. 非法改变其功能所致

  • 如果设备在设计上就潜在着该功能的话,那么对其对进行改造,恐怕还无大碍,就怕没有该项功能,却硬要强加该功能,这会活活要了设备的“命”。

  4. 超负荷使用

  • 人停机不停,一天二十四小时连轴转,一年开足三百六十五天,不坏就不停;不坏就不修,一心急着要翻本,这是“山寨厂”典型的设备使用方法。虽然有的设备在超负荷状态下,暂时看不出有什么故障发生,然而超负荷运转,却使设备产生疲劳,老化、磨损进程大大加快,最终导致寿命缩短。

  5. 设计上潜在不良因素

  • 设计时未能充分研讨清楚相关事项,匆匆上马,导致使用阶段故障多多,于是又进行二次补丁设计,三次补丁设计……,迟迟无法定型。这样的设备,让人无法放心使用。

  6. 维护手法欠佳

  • 一流设备,二流操作,三流维护。不把设备当“人”看,只叫干活,不给“饭”吃,连最基本的清洁都不搞,以致小故障逐渐演变成大故障。

浴盆曲线

    实践证明大多数设备的故障率是时间的函数,典型故障曲线称之为浴盆曲线(Bathtub curve)。曲线的形状呈两头高,中间低,具有明显的阶段性,可划分为三个阶段:早期故障期,偶然故障期,严重故障期。浴盆曲线是指产品从投入到报废为止的整个寿命周期内,其可靠性的变化呈现一定的规律。如果取产品的失效率作为产品的可靠性特征值,它是以使用时间为横坐标,以失效率为纵坐标的一条曲线。因该曲线两头高,中间低,有些像浴盆,所以称为“浴盆曲线”。失效率随使用时间变化分为三个阶段:早期失效期、偶然失效期和耗损失效期。

9a71cdaa4fe09c93f9d0072c68565b04.png

0be12668565d55614944e7cb5b9e0b90.png

维护的常规工作

二、工作内容及关系

1、上电调试

关注点:

  • 检查新设备或系统是能否正常上电启动;检查扩容后、改造后的设备或系统是否能正常上电启动,验证设计的合理性。

  • 检查修复后的设备或系统能否正常上电启动,检查设备故障和隐患的处理情况。

  • 初始调试配置参数对设备或者系统的稳定运行至关重要,参数更改不当,将造成系统无法正常工作,严重的甚至损坏系统。

工作安排:

  • 涉及人员:专业工程师(配电等专业)、运维技术经理、设备商工程师。

  • 人员职能:根据设备商上电SOP,由专业工程师或者设备商工程师进行上电启动。根据设备商操作SOP,由专业工程师或者设备商工程师进行参数调试。

补充说明:

    SOP:SOP是Standard Operating Procedure三个单词中首字母的大写,即标准作业流程,就是将某一事件的标准操作步骤和要求以统一的格式描述出来,用来指导和规范日常的工作。

一体化UPS场景上电调测

  • 基本原则:

1. 双路输入或双路供电时,建议先给A路上电,再给B路上电。

2. 给一体化UPS上电,然后给照明、空调上电,再然后给机房管理系统上电,最后给IT负载上电。

  • 基本流程:

1. 上电前检查

2. 系统上电调试

e3d02753043a69bbca96ffa6980bb939.png

  • 操作步骤

    步骤1 合上模块外一体化UPS 前端电源输入市电空开,给一体化UPS 柜上电,一体化UPS柜上方电源指示灯点亮,上电正常。

    步骤2 闭合一体化UPS 输入空开QF1,等待约2~3 分钟, MDU 显示屏启动。设置语言、时间、网络参数、系统参数(单并机、电压频率、电池容量、单体数量)。

7d53ae441334bad7d87a7b38a805b583.png

    步骤3 确认系统旁路输入正常,系统由旁路供电,在监控显示模块中查看系统运行状态图,确认系统是否已经由旁路供电。步骤2 闭合一体化UPS 输入空开QF1,等待约2~3分钟, MDU显示屏启动。

    步骤4 开启逆变器。

cd59283707d1f8bc18421690a6149960.png

    步骤5 逆变器开启后,一体化UPS 由逆变供电, MDU 中“旁路供电”告警消失,查看系统运行状态图确认系统是否由主路逆变供电。

    步骤6 核对实际电池容量与单体数和监控界面中设置的值是否一致,用万用表测试负电池组电压绝对值与正电池组电压之和大于一定值( 2×电池单体数),用以检测电池组连接是否正常。

    步骤7 确认电池组已连接好后,闭合电池组输入空开。

    步骤8 (可选)闭合一体化UPS 照明输出空开,查看交流执行器“ PWR”指示灯是否亮起。给照明上电。

    步骤9 合上一体化UPS 柜空调空开,给空调上电。

    步骤10 依次闭合一体化UPS IT 输出空开,为对应设备上电。

    步骤11 检查监控部分是否上电正常。

a39f3c3d44602fd189d08cf2aa0b6cb6.png

  • 例行维护

关注点:

  • 检查设备的部件完整性、清洁度和老化程度。

  • 记录设备日常运行过程中参数、告警、日志和状态,及时更新形成动态SCP,后期进行评估。

  • 通过操作检查设备的功能、部件运行情况。

  • 定期进行设备外、内部的清理。

  • 检查设备、系统及外部环境是否存在隐患。

工作安排:

  • 涉及人员:运维值班员、运维值班班长、专业工程师、运维技术经理、设备商工程师。

  • 人员职能:由运维技术经理编写或者设备商提供MOP,专业工程师或设备商工程师根据MOP进行周期性的维护、养护工作;由运维值班班长制定例行维护人员计划,运维值班员按照计划进行例行维护巡检;由运维值班班长刷新SCP数据中心,并形成周期性评估报告。

补充说明:

    MOP:MOP是Maintenance Operating Procedure三个单词中首字母的大写,即维护作业流程,对机房关键基础设施设备的每次维护、维修、安装操作进行制定作业程序,部分MOP中也会包含SOP。可以要求设备供应商提供MOP的建议,但对于MOP最终确认审核的责任在于运维团队,批准责任在于运维管理团队。

    SCP:SCP是Site Configuration Process三个单词中首字母的大写,即场地配置流程,动态管理数据中心基础设施系统与设备运行配置。包括设备系统固定信息(类型、数量、物理位置、资产编号、投入时间等)和动态信息(运行状态、剩余容量等),对设备系统进行全生命周期的管理。

日常巡检表

419ffa3ab2b5bc2cbc1750a7e7add3e6.png

995ae7a30eb93325901eeee9b05f01b1.png

da3948911d94c2b34ee45b4329b3e6ac.png

供配电系统例行维护(一体化UPS 场景)- 月度维护

1d08bf311417f4846927857dd871271e.png

供配电系统例行维护(一体化UPS 场景)- 季度维护

57fafc322899eaad093744aa9b71c992.png

供配电系统例行维护(一体化UPS 场景)- 年度维护

eea633b4a9ba6fff3b722ab95808aac8.png

  • 系统联调

关注点:

  • 查找系统设计、设备性能是否存在影响整体的“短板”。

  • 检测设备安装是否适应日后的运行维护。

  • 检验设备安装和运行质量是否稳定可靠等。

工作安排:

涉及人员:专业工程师(配电等专业)、运维技术经理、运维值班员、运维值班班长、设备商工程师。

人员职能:由运维技术经理根据SOP以及设备商资料制定系统联调流程方案,并由讨论确定最终方案的可行性;由运维技术经理统称安排专业工程师或者设备商工程师根据流程方案进行操作,设备商还需提供技术督导作为现场应急顾问;运维值班班长需要安排通过运维值班员做好现场保护工作。

    基于数据中心项目的最佳实践,IBM主张采用“五步法”流程对数据中心的基础设施进行联调测试。即,

第一步(Level 1)——图纸资料评审与调试计划制订

第二步(Level 2)——工厂验收测试

第三步(Level 3)——现场检查

第四步(Level 4)——单系统验收测试

第五步(Level 5)——综合系统性能联动调试验证

“五步法”流程也是国际公认的数据中心专业调试验证工作流程规范:

第一步(Level 1)——图纸资料评审与调试计划制订

  • 调试验证工作团队架构与分工

  • 图纸资料所反映的系统是否具备“可测试性”

  • 图纸资料是否已经明确操作顺序

  • 测试验证所需资源(人员、时间、能源、负载、仪器)是否落实

  • 调试总体计划的制订

第二步(Level 2)——工厂验收测试

  • 对电力系统、空调系统的核心设备在出厂前进行性能验证

  • 就测试与验证发现的问题在工厂进行整改纠正

  • 避免或减少设备故障对现场施工的延误

  • 业主设备采购合同验收的重要标志

第三步(Level 3)——现场检查

  • 检查现场安装情况与设计图纸相符。

  • 检查现场电源条件安全可用。

  • 检查现场安全状况符合运行调试工作的要求。

  • 运行调试验证用的设备设施到场就绪。

第四步(Level 4)——单系统验收测试

  • 设备上电,系统启动测试。

  • 在设计负载水平下测试系统功能,空调系统负荷不低于30%,电力系统负荷不少于单台设备的额定容量。

  • 在各冗余系统内验证故障切换模式。

  • 在各系统的计量点、控制点和数据收集点进行验证校准。

  • 记录备案测试结果与系统效率。

第五步(Level 5)——综合系统性能联动调试验证

  • 模拟电、水等外部资源供应中断,检验系统响应与切换模式。

  • 空调系统热负荷模拟测试,空调系统负荷从0逐步增加到100%,检验空调系统各部分的性能。

  • 系统集成测试,综合测试电气、空调、消防与智能化控制等多个系统的接口性能。

  • 在设计满负载下进行多系统连续运转(一般不少于12小时)测试,检验系统的稳定性。

  • 记录备案测试结果与系统效率。

  • 故障处理

关注点:

  • 故障应急预案,执行冗余方案尽快恢复业务或保证业务不中断。

  • 故障清除处理,根除故障并行政讨论小组研讨根源问题,并形成解决方案(如扩容、改造、优化等)。

工作安排:

  • 涉及人员:专业工程师(配电等专业)、运维技术经理、设备商工程师。

  • 人员职能:根据运维技术经理和设备工程师编制EOP,并在故障发生期间由专业工程师或者设备商工程师按照EOP进行故障应急预案操作。后期根据SOP进行设备系统故障清除处理。

补充说明:

    EOP:EOP是Emergency Operating Procedure三个单词中首字母的大写,即应急作业流程,突发设备或者系统故障时,为保证业务不中断或者恢复业务而启动冗余或备用系统而需要执行的操作流程。

UPS故障处理案例f262e448bb3b2fd35598a190f86fffb5.png

常见故障处理(一体化UPS 场景)

aabe705b9604e8c578538d0bc12ebfbf.png

部件更换

关注点

  • 达到使用寿命的设备系统部件,通过更换恢复设备系统正常运行。

  • 存在隐患、发生故障的设备系统部件,通过更换恢复设备系统正常运行。

工作安排:

  • 涉及人员:专业工程师(配电等专业)、运维技术经理、设备商工程师。

  • 人员职能:根据运维技术经理和设备工程师根据SOP更换设备系统部件。

更换一体化配电柜&精密配电柜MCB

操作步骤
    步骤1 打开配电柜前门,将配电柜输入、输出开关切换到OFF 状态,且上下级开关也断开。
    步骤2 拆卸配电柜面板上的螺钉保留好备用,并取下面板。

    步骤3 拆卸MCB 左右两端的线缆,如图所示。更换一体化配电柜&精密配电柜MCB

5a6f0be68aca09a7004b5611cf91d2b8.png    7380de2e477dd7ed4dd981abdee5f565.png

拆卸面板                                        拆卸线缆

    步骤4 用一字螺丝刀将MCB 黑色卡扣件向外拨动,如图所示,然后将MCB 沿配电柜内侧方向拆卸。

    步骤5 将新的MCB 装上。

    步骤6 连接线缆。MCB 线缆推荐接线孔位如所示。

    步骤7 将面板重新装回配电柜。

    结束。

38be41dda8ba6f93a7172b3047c52ff7.png

福利

数据中心建设/基础知识/运维人员的交流圈子,不定期为您提供数据中心领域前沿资讯/培训课程/独家技术手册/机房建设标准规范/标准体系文档模板等,行业大咖分享交流/同行经验分享互动,期待你的加入!扫码即可加入。

随着材料不断增多社群会不定期涨价早加入更优惠

de175ec98a3506cf6cbe19ae3f29a7fa.png

免责声明:

本公众号部分分享的资料来自网络收集和整理,所有文字和图片版权归属于原作者所有,且仅代表作者个人观点,与本公众号无关,文章仅供读者学习交流使用,并请自行核实相关内容,如文章内容涉及侵权,请联系后台管理员删除。

更多推荐

           

数据中心供配电系统继电保护基础知识

五种常用的UPS电源并机方案,你用过哪种?

UPS电源安装流程

通信机房蓄电池鼓涨原因

数据中心机房设备标签规范建议

       
版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。
本文链接:https://blog.csdn.net/qq_15350605/article/details/125454554

智能推荐

使用curl在命令行中下载文件_bat脚本 curl 下载文件夹下所有文件-程序员宅基地

文章浏览阅读1w次,点赞2次,收藏5次。今天帮同学从一个网站上下载点数据, 但是上面有上百个链接, 一个一个点击下载实在是工作量太大。 于是自己就想找一个命令行下载工具并用Python写一个简单的脚本来替代这些工作。百度了一下, 找到了curlcurl: curl是利用URL语法在命令行方式下工作的文件传输工具。 [百科: http://baike.baidu.com/view/1326315.htm]官网: http:_bat脚本 curl 下载文件夹下所有文件

常用的原型开发工具-程序员宅基地

文章浏览阅读67次。1、Axure RP(Rapid Prototyping)Axure(读音为Ack-Sure)无疑是目前最受关注的原型开发工具,其能通过组件的方式帮助网站或软件设计师快速建立带有注释的原型(流程图、线框图),并凭借自定义可重用的元件、动态面板以及丰富的script能够建立基本功能或页面逻辑的动态演示文件。Axure借鉴了office的界面,能够让用户快速上手,并且提供了..._程序员原型法常用工具

nuiapp请求网络_uni-app 接口 - 网络请求-程序员宅基地

文章浏览阅读145次。1、 uni.request(OBJECT) 发起网络请求参数名 类型 必填 默认值 说明url String 是 开发者服务器接口地址data Object/String/ArrayBuffer 否 请求的参数header Object 否 设置请求的 header,header 中不能设置 Referer。method String 否 GET (需大写)有效值:OPTIONS, GET...

Vim命令学习参考_hadoop vim是什么操作-程序员宅基地

文章浏览阅读368次。1. 关于Vim1.1 Vim的几种模式2. 启动Vim3. 文档操作4. 光标的移动4.1 基本移动4.2 翻屏4.3 标记5. 插入文本5.1 基本插入5.2 改写插入6. 剪切复制和寄存器6.1 剪切和复制、粘贴6.2 文本对象6.3 寄存器7. 查找与替换7.1 查找7.2 替换7.3 正则表达式8. 排版8.1 基本排版8..._hadoop vim是什么操作

应用加速,数字人民币接入多地交通出行场景 | 产业区块链发展周报-程序员宅基地

文章浏览阅读3.1k次。摘要产业动态:微众银行多方大数据隐私计算平台通过信通院权威评测欧洲最大移动运营商沃达丰将为AI智能协议移动终端提供移动通信服务汇丰银行加入迪拜经济的阿联酋KYC区块链平台重庆市先进区块链研..._交通联合 小额支付

随便推点

TCPIP详解卷1第3章IP网际协议3.2IP首部3.3IP路由选择-程序员宅基地

文章浏览阅读164次。转载于:https://www.cnblogs.com/sunyongjie1984/p/4319969.html

linux which,whereis,locate,find的区别_linux中whereis locate which的区别-程序员宅基地

文章浏览阅读221次。find就不用多说了,就是递归遍历文件夹。which:有时候可能在多个路径下存在相同的命令,该命令可用于查找当前所执行的命令到底是哪一个位置处的命令。whereis:是在数据库中查找文件,在数据库(var/lib/slocate/slocate.db)中查找与文件名相匹配的二进 制文件、源文件和帮助手册文件,使用之前可以使用up..._linux中whereis locate which的区别

olat中解决查看gui_demo源代码异常或debug模式下查看源代码异常_guidemo_main不显示-程序员宅基地

文章浏览阅读1.2k次。出现这种异常是因为没有设置 project.build.home.directory 参数,系统找不到源代码文件的位置。解决办法:1.首先下载源代码,可参考如何下载olat源代码并在eclipse中查看2.在部署的服务中找到 olat.local.properti_guidemo_main不显示

自定义View-Rect和RectF_android根据rect坐标添加控件-程序员宅基地

文章浏览阅读1.4k次。Rect 类定义了一个矩形结构,同样实现了 Parcelable 序列化接口。Rect 类定义了 left、top、right、bottom 四个成员变量,我们需要正确理解这 4 个成员变量的作用:left:矩形左边线条离 y 轴的距离top:矩形上面线条离 x 轴的距离right:矩形右边线条离 y 轴的距离bottom:矩形底部线条离 x 轴的距离矩形是一种非常常见的图_android根据rect坐标添加控件

CCS5导入工程时出错:Issues that may require your attention were encountered while importing the projects-程序员宅基地

文章浏览阅读2.4w次,点赞10次,收藏27次。1.出错CCS5.5.0导入工程(Import CCS Eclispse Project)时出错:Issues that may require your attention were encountered while importing the projects ,如下图:2.原因是由于文件夹名(例如f28335_Sci_Update_Flash_first)和文件夹中的工程名

Android4.0 Toast显示问题分析_安卓4.0不支持uni.showtoast-程序员宅基地

文章浏览阅读8.9k次,点赞3次,收藏4次。在修复RUI桌面在4.0系统下的提示信息不完善的Bug过程的一些思路与大家分享一下。Bug描述:RUI在2.2的系统点击推荐图标下载后,就会进入下载队列中下载,如果再次点击相同的图标就会使用Toast提示“**已经在下载队列中”。但是在4.0的系统就会出现异常,第二次点击相同的推荐图标时没有出现Toast提示。相关源码:public static void showMe_安卓4.0不支持uni.showtoast

推荐文章

热门文章

相关标签