2024-11
27

弱鸡鸡的机房

By xrspook @ 9:35:43 归类于: 烂日记

某次单位进行电力监控的升级改造,要在半夜的时候断电进行操作。理论上大半夜没有作业,大家都在睡觉,这样的操作影响应该是最低的,但关键是第二天,整个单位的业务瘫痪了。因为浪潮的智能化系统挂掉了。我一整天都不知道是怎么回事,反正就好像单位那个刷车车船排队的网页无论如何打不开,理论上正常的话,单位早上8、9点就会有重车校验的图片以及说明,但是那一天一整天都没有,从调度信息来看,理论上那天是要装船的,但是车船记录都没有。我以为是微信在平板上登录了,但实际上没有,所以我退出了手机的微信。我还清楚记得那天是周日,因为那天傍晚吃过晚饭我回单位,但结果是当我准备从家里离开的时候,打开手机打开微信才发现单位同事找我要前几天的库存数据。一个管网络的人找我要库存数据,你们的数据就没有备份?后来我才知道,因为半夜进行电力改造,但是单位的服务器没有提前手动关掉,所以对服务器来说,等于是突然断电,突然断电导致数据丢失,并且出现莫名其妙的错误。

机房的升级改造之前,浪潮的数据库会出现错误,绝大多数情况都是缓存数据满了,于是新的数据没法写入,这时,你能看到非常明确的提示,接下来,网管同志就知道该如何做了,另外一个情况就是整个系统越用越慢,这种情况谁也说不清到底是怎么回事,但重启一下就好了。

电力监控改造是有计划的,但是管机房的人却少了这个心眼手动把数据库关掉。在机房改造之前,我不知道那里有多少设备、有多少UPS,直到周二我去询问情况的时候才被告知,现在的机房服务器的设备多了很多,UPS也大了很多,但现在的UPS蓄电池只能支撑两个小时。两个小时能做什么?即便机房24小时都有人值守,但可能打个瞌睡都不止两个小时了。

这一次也是一个周日,我们遇到了也说不准到底是什么原因的突然停电,而且是半夜停电,可想而知,服务器们又是突然就挂掉,因为那些UPS甚至无法支撑到天亮就全部耗尽了。停电的那一天,我第一走进机房,看到那些UPS蓄电池的放置场所我的第一个反应是为什么就只放半人高呢,又是周二,我才被告知,那个地板的承受能力也就只能在那个面积上面堆这么多蓄电池了。我感觉那堆蓄电池的占地大概几个平方。虽然堆起来密度已经不小了,但是它们却仅仅能支撑十几米一堵墙那么多服务器两个小时的电量,可能除了那些服务器以外,还包括空调。在改造之前,据说以前的UPS只能支撑20分钟。20分钟,我即便收到信息马上赶过来都赶不上,但2个小时,如果发生在半夜,同样无解。为什么要搞UPS呢?就是为了停电的时候还有个后路,但2个小时的设计等于没有路。既然升级机房的时候你要选择华为分布式的服务器,华为怎么可能不告诉你我至少得有多少UPS蓄电池支持才能持续运行多长时间。
UPS不能保证你一直没有问题,但起码得支撑到管理员到达现场处理或者远程处理。让我觉得非常不可理解的是为什么他们既然知道UPS在启动了、UPS的电量不足了,但是服务器却没有一个逐步保存关闭的程序。突然断电服务器肯定受损,而且那种受损是你无法预知到底损在了哪里。知道没有电,就进行逐步自动关闭,等于是模仿人工应急的操作,能把损害降到最低,为什么就没有这个自动自我关闭的设定呢?是华为自己没有这个设定,还是浪潮根本就没往这方面想?为什么其它的机房不会有这种问题,人家的UPS蓄电池到底用多久?别人的电路到底有多少条?为什么别人能保证当这一条电路不行的时候能切换到另外一条?哪怕都不行了以后,依然能保证服务器里面的东西安全。

周日的停电,除了让我们的生活非常痛苦以外,现在的后遗症很明显,就是浪潮的应用跟数据库出岔子了。整套智能化系统基本属于瘫痪的状态。突然停电算是意外的天灾,但是一次又一次在同一个问题上摔跤,依然没有一个确切的解决方案,这就是人祸。

2024-11
26

接反了?

By xrspook @ 9:50:33 归类于: 烂日记

据说周六单位的停电保安在凌晨3、4点的时候就发现了。保安是24小时值守的,他们发现是理所当然的,所以我估计是那个不值守,但却最早发现的人,我发现的时候差两分钟凌晨5点。

花了一整个上午,到接近中午12点的时候才开始用发电机给生活区这边发电。为什么要给生活区发电呢?没有电就没有水,就没办法煮饭。市政的水接进来,只有少数几个水龙头能直接使用,其它地方要用水都需要水泵加压。楼顶水箱的水估计在早上8点前就已经被大家用光。饭堂厨房设置在离市政水比较远的地方,所以不进行水泵加压,饭堂没有水,就无法做任何清洗,当然也就没办法做饭了,哪怕饭堂可以用液化石油气加热。我不知道大家的早餐吃的是什么,反正我中午接近一点的时候过饭堂的时候,午餐的那个样子跟平时的早餐没区别,一个西红柿鸡蛋汤面,另外一个是肉丝蒸陈村粉。如果没猜错的话,估计这是那天早上的早餐,早餐最终不知道他们做了什么。虽然早上送菜的把东西都送到了,但是无论是肉还是菜都需要清洗,没有水什么都做不了,所以要吃饭也就只能什么简单做什么。接近中午12点才开始有电,所以我猜最早那顿饭也到一点才会有结果,但好像在中午12点30的时候,群里就宣布可以去吃饭了,但那个时候我没看到,有电以后,我给自己冲了一杯手冲咖啡。

吃完饭以后回到办公室,看到旁边的机房开门了,于是我就进去打听到底什么情况。因为理论上有电了,服务器转起来了就应该有网了,但实际上没有网,所有WiFi都处在工作状态,但是全部都无法连接互联网。步入机房的那一刻,我就感觉到热气扑面,为什么会这样呢?机房的空调向来都是很猛的,停了几个小时电,热是正常的,但是我进去的那个感受是空调根本没有转起来。询问之后才知道,原来空调开不起来。最重要的原因是那个总控没办法从UPS转为市电。UPS在过去大半天的时间里已经耗尽,所以我进去机房的时候,那些UPS蓄电池正在充电中。充电中的蓄电池为什么就不会不可以切到市电的那条线路上呢?想想都觉得这非常不可能,总不能等到那些蓄电池都充满电了,才能切过去吧,完全不符合逻辑。同事在那里折腾了半天,然后他又打电话给另外一个同事,电话指导操作下又折腾了半天,毫无结果,最后电话里的那个同事让他打电话给总控的客服。客服听了他说的情况以后,迅速敏捷地把那个原因锁定下来,是我们接入总控的那条线接反了,火线跟零线接反了,所以在手动切换UPS的那个界面会出现神奇的返回首页、没有任何效果。同事折腾总控的时候,生活区用的是发电机发的电,打那个客服电话之前,机房的空调按重启之后,机上显示的是“反向供电”,所以也验证了那个客服线路接反的说法。不就是接个发电机,临时自己发电,这怎么也可以接反呢?同事给总控客服打电话的时候,单位的群里说,马上要从发电机重新切回市电。切回市电以后,机房里所有东西都正常了。光管亮起来的那一刻,我已经感觉到空调正常运转起来,机房里那一片没有亮起的服务器灯也终于亮起来了,虽然不是全部都亮了,但起码有一些亮起来了,意味着它们通电了。在这件事之前,我还真的不知道,原来火线跟零线反过来接部分用电器还是能运转的,而另外一些用电器,他们会对线路进行检测,比如机房的那个空调和总控。

我以为切回市电以后会一切正常,但是下午16点多的时候,又进行了连续多次的停电,17点的时候也一样,所以办公室的电脑被开了又关、关了又开。最后,我甚至有点不敢打开那个机子了,因为我好怕电源按下去,几秒之后又停电,这种事情不是我的过分担忧,而是真的就这么发生过。

没有刮大风,没有下大雨,一切都很平常,但突然就发生了这么一件不知道为什么停电的事。

2024-11
25

周日停电

By xrspook @ 8:12:08 归类于: 烂日记

周六的晚上睡觉的时候,小米civi 1S的电量大概还剩下35%。这样的电量撑到周日的早上把所有任务都做完,中午回办公室充电是完全没问题的,但关键是周日早上接近5点起来上厕所的时候发现灯不亮。洗手间的灯不亮,阳台望出去,也没有什么路灯。我不确定没有路灯是因为晚上那些装饰灯都关掉了还是什么原因,反正宿舍一定是没电的。没电也不要紧,我还能借助隔壁角美粮库那一点点的灯光上个厕所,毕竟上厕所这种事不需要太高的技术含量,不用看那么清楚,大概差不多就行了。

早上7点10闹钟响起的时候,无论是书桌上面的排插还是墙上插着路由器的插座,红色的电源灯都没有亮起,也就是说还是没电。没有电就意味着所有路由器都无法正常运作,说白了就是我要完成7点10的任务就得使用手机的流量,5点发现没电的时候我就知道得这样,果然当我7点10做任务的时候也只能这样。

接下来,我迷迷糊糊地听到有人说跳闸了,还听到一些把电闸打上去的声音。我以为是宿舍的电闸跳了,宿舍跳闸这是很普通的事情,下雨的时候尤为经常,不下雨的时候,什么时候会跳也很难说。但是当我接近8点30闹钟要起床吃药的时候,发现宿舍依然没有电,同事们已经把电闸打过了,如果是宿舍这边的问题的话,应该已经解决了,但实际上没有。没有电,什么都做不了。最让我纠结的是插着手机卡的那台手机电量不足了。如果手机的电量充足,我不会那么慌张。手机电量充足,我可以开热点给另外一个没有插卡的手机,然后该干嘛干嘛,顶多是开电脑的时候什么事都干不了。现在插了电话卡、我的主力手机,有支付宝跟微信的那个手机处在电量低下的状态,不知道这个停电要持续多久,反正想想都觉得很难熬。想了一圈,身边唯一的充电宝就是随身WiFi的那个分体式的电源,但是那个玩意我已经好两个月没碰过,十一的时候我把它充满电了,但现在还有多少电量我不知道,但那已经成为我唯一的救命稻草。手机电量是最大的问题,所有东西没有WiFi只能走手机流量,这个我还不算太忧心,因为这个月积累下来的流量还足够我正常使用。完成日常的任务没有任何问题,除非我开着热点让电脑连接,然后电脑又进行什么奇怪的更新,否则我的流量能包得住,但话说回来,没有UPS,台式机根本开不了机。

吃完药以后我回到床上,赖死不起来,最重要的原因是停电也干不了什么,但是到9点多的时候,我实在躺不下去了。7点多的时候,办公室的人说早餐要晚一点。两个多小时过去了,没有任何人说到底是个什么情况。如果是市政的原因,他们早该打电话过去问清楚了。市政会告诉我们什么时候才能修好,也有可能告诉我们还没找到原因,正在排查中。

早上10点多的时候,单位终于有人发声说即将要用自己的发电机发电。要用自己的发电机发电这种情况通常意味着是市政那边的原因导致我们这里没电,所以我就赶紧又问了是不是市政那边的原因,结果却被告知是我们自己的问题。离他们7点多开始处理已经过去了三个多小时,还是没找到是什么原因导致我们内部出现跳闸停电。

我可以怎么办呢?我什么都办不了。草草吃过早餐,就带上其它东西回办公室,因为随身WiFi的那个电源在办公室。虽然那个给手机充电很慢,但起码那个东西号称是5200毫安时的,足够充我的小米civi 1S,而且我也没打算要把它充满充的50%以上,大概差不多就能撑一段时间了就行了。充电宝给手机充电的时候,我顺便把手机的热点开了,然后用另外那台红米Note11 5G完成日常的任务。红米Note11 5G的电量我一点都不焦虑,因为周六我才刚刚充过电,那台手机的亮屏时间能在6个小时以上。正常情况下,我能用三天以上。这三天还包括了其中一天可能我要完成20局消消乐的任务。其它时候,我只是用来完成各种日常打卡任务。最糟糕的情况是我的小米civi 1S真没电了,我只能把手机卡拆出来,放到红米Note11 5G上面。红米Note 11 5G没有微信、没有支付宝。支付宝很好处理,因为那个手机上有淘宝,可以登录,但微信换了个手机,这可是非常麻烦的事。

离中午12点还差4分钟的时候,单位的发电机终于动起来了,生活区这边总算有电。从宣布发电到终于发上电,花了一个多小时,因为平时的那台发电机不知道为什么动不起来,所以得用另外一台更小的发电机先让那台发电机动起来。可想而知,我们这里有多长时间没有用过备用电源。但也这是一个警示,即便我们不需要使用备用电源,那个玩意你起码得半个月或者一个月检查一下,确保在有需要的时候能动起来。

我向来是一个不怎么需要充电宝的人,但这一次,真的让我很认真地考虑,我是不是要在单位放一个充电宝。我应该把家里那个一直闲置的充电宝带回单位,还是再买一个呢?无论是哪个选择,绝大多数情况下,99%我不会使用到他们。

2024-10
31

垃圾水质

By xrspook @ 8:24:08 归类于: 烂日记

天气转变的时候,东西是最容易坏的。在没有开始变凉之前,广东的湿度一直在70%或者以上,过分的时候可能会到达90%左右,但是随着假秋天的到来,湿度一一路走低。最夸张的时候,我家的湿度还不到20%。通常情况下宿舍的湿度会达到85%以上,但现在湿度只有50%左右。干燥肯定好,起码不会担心发霉之类的事情,但是就不得不涂一点润肤露。处理纸张的时候也得特别小心,因为一个不小心就会划口子。手总感觉很干,总感觉忍不住要撕皮。

宿舍洗手盆的热水编制管爆裂之后,我才发现,之所以那个东西会断掉可能管子里早就有很多沙子了。洗手盆的热水通常是不开启的,所以一年到头好长一段时间,那个管子都处在一个封闭的状态。为什么花洒的热水没有问题,是因为即便在夏天,洗澡之前放水,我都是直接开热水,开到最大。洗澡的时候再适当往回调。相对而言,花洒那边被沙子淤堵的几率低一点,但有些时候,尤其是放假归来,开热水的时候,可能会有很长时间的黄泥水。花洒跟洗手盆不一样,洗手盆在接水龙头之前还有一条编织软管,但花洒的混水器是直接接在墙体的水管上的。就感觉来说,洗手盆后面,无论是角阀、编织管还是水龙头,都很难修,相对而言,花洒的那个混水器,从空间来说,好像容易一些。

第一天晚上那条断裂的编制管还连在那个地方,所以实际上洗澡的时候,我没有做太多额外处理。晚上洗完澡,碰了一下那个东西,发现其实里面的橡胶管已经完全断裂。连接的只是某条红色的尼龙绳。当我把那条东西剪掉以后,第二天晚上洗澡,那个水沿着那个出口喷得老高。我已经全部脱衣服,准备洗澡了,那个水不是温柔的流出来,而是喷出来。这边的水是喷出来,而我花洒的水仍然只是一条线,这样的水压没有办法,我只能在那个断头的地方盖一块抹布。那个口的水依然会流,但起码不会喷到天上去。第三天晚上在洗澡之前,我就请教网友我该怎么办。他给出的方案是热熔胶。一开始我担心热熔胶直接灌里面会不会通过角阀然后留到水管里。所以他的建议是我先削一个橡皮擦堵住,然后再开始热熔胶。但实际上我们都多虑了。好不容易拿个手机,在狭小的角度拍摄照片以后我发现。那个断裂的管口有一些黑色的橡胶残留,除了那个东西以外,当我拿着电笔往里面插的时候发现手感很不对,里面都是固体,塞满了。那条断裂的编织管橡胶内径跟我的热熔胶一样,但是断裂的那个口里面几乎可以这么说,没什么空间。一开始我以为里面应该有些水,所以我塞了一些纸巾进去,结果发现纸巾居然塞不进去,用手触摸,我好像根本没摸到那么大的直径。当我用电笔也就是一个很普通的小型一字螺丝刀去捅的时候发现里面全部都是沙子。说不准那到底是水垢还是沙子,反正就是类似的那些固体。一个编织软管的接头尚且如此,可想而知,那个角阀里面估计早就不知道被多少沙子堵住了。我不知道为什么好像没有听说谁宿舍的总开关球阀有问题,又或者说只是我的没有问题,那些长期不用的也会有问题,但起码所有人的角阀一定全部都有问题,无论你买什么质量的角阀,因为水质实在太差了。自来水公司说跟他们没关系,他们的水在接进来的时候是合格的。为了这个泥沙的问题,还特意投诉过,让他们过来检查。他们说这是我们自己内部管道的问题。内部管道的问题,让所有人的角阀都坏掉、让所有人的水管都堵掉、让所有人的水龙头都不断腐蚀。我不知道角阀这种东西,哪怕不是在这种地方,到底是不是应该每隔几年就换,哪怕不换阀体本身也要换里面的阀芯,又或者得拆出来清洗。在遇到这种事之前,我完全没有听说过要做这种维护。

那个断头管子里面都是沙子,所以之前我担心的用热熔胶会不会直接流到水管里的想法绝对是不可能发生的。所以我就大胆地往里面热熔胶。一开始我只是堵了个头,后来网友指点,我应该再搞多一点,直接让那个热熔胶包住那个断头的两个凸起的纹路,那么热熔胶就能像手一样找到一些可以发力抓手的地方,这样就不容易在水压之下把堵进去的那些东西喷出来。在用热熔胶处理之前,我觉得很大概率那个东西会飞出来,但是当我把热熔胶打了很多,打到那个地方根本认不出原来是什么样的时候,我觉得我的热熔胶有可能不飞出来。洗澡的时候我用了我认为最低限度的热水流量,在这种情况之下,那个断裂口的封堵没有喷出来,但是那个地方有渗漏。渗漏的点不在我打热熔胶多层加固的地方,而是在断头软管跟锈死的螺母之间。

如果宿舍不是那么抠,宿舍不用单孔的冷热水水龙头,那么那条连通角阀跟水龙头的管就不会那么细,不需要承受那么高的压力。即便坏掉更换的时候也比单孔的冷热水龙头简单很多。

2024-10
29

终于爆雷了

By xrspook @ 9:40:08 归类于: 烂日记

你永远都不知道你将遇到什么,虽然有些事情你早就已经预料到了。

周一的晚上吃过晚饭回宿舍,我终于忍不住要洗一下洗衣机,因为洗衣服的时候,那些粘在衣服上面的东西越来越多。要洗洗衣机,光用冷水肯定不行,所以我就把洗手盆的热水开到最大,然后一盆一盆地用小盆接到洗衣机里。这次我除了放已经过期了很久的洗衣机清洗方块以外,我还放了好几勺的爆炸盐。我感觉二者的成分是有点相似的,其中一个很重要的成分是表面活性剂。无论是哪一款,都需要在高温下才能起作用。

我实在没有那么好的耐性装满一一整个洗衣机,所以装到一半以后,我就开始正常放水了,但是我好像依然听到洗手间里有水的声音,虽然水龙头我已经关了。我知道我用水盆去接水,肯定会有一些水洒在地上,但关键是好像洒在地上的水比我料想中要多,接着我发现洗手盆下边连接水龙头的热水编制管在喷水。洞不算很大,但是喷得很猛烈,水直接打在了洗手台的支撑柱上。虽然那个时候,我的水龙头已经处在关闭的状态,但是水压还是很大。看到那个状态的时候,我很崩溃,整个宿舍除了阳台和洗手间地板漏水以外,最糟糕的就是那个东西。因为那里的可操作空间非常小。手几乎伸不进去,那个东西坏掉,意味着要更换的是一连串的玩意。包括坏掉的那根编织软管,连接那根软管的角阀,还有上面的水龙头。那个冷热水龙头,几年前我就知道它在漏水,漏得我满地水,最后我想到一个方法,在水龙头上加一条围巾,把漏出来的水引到洗手盘里,这样的话即便漏水,也不会漏得我一地。为了解决那个水龙头的漏水,我曾经尝试过把水龙头拆开,结果拆到一定程度的时候发现那个材质像一张纸,稍微用力估计就碎掉了,不用力,你又没办法把那个装置拆下来。把上面的盖子拆掉以后,我证实了我的想法,那个东西在漏水的,但漏得不太严重,水珠是一滴一滴的冒出来的。即便我把肉眼可见的水都吸干,过上一段时间那里依然会满水然后溢出来。那次拆解让我明白的那个水龙头是个一碰即废的东西。

水龙头的软管连接的那个角阀,软管的那个螺母早就已经锈掉了,那根软管的编织材料外面摸上去有白白的固体,是水垢。估计之所以会有那些东西,是因为水龙头漏水,所以水一直留到那个地方。水垢有了,螺母锈住了角阀。从入住开始我就没动过,7年以来那个角阀完全不敢动,因为抽水马桶的那个角阀在某次试图清洗抽水马桶的时候一动马上废掉。抽水马桶那角阀废掉的时候,我试过轻轻地扭动洗手盆下面的冷热两个角角阀,纹丝不动的节奏。要不纹丝不动,蛮力以上估计马上会散架,所以那个东西碰不得。现在软管坏掉了。我不得不死马当活,死命扭那个角阀,一点效果都没有。我该怎么办呢?唯一的办法就是把总的热水球阀关掉。要不漏水,只能这样,但是这样做,我怎么洗澡呢?即便是大热天,也不可能完全不用热水,现在天气已经变凉,晚上已经不用开空调,在这种情况之下,不可能不开热水洗澡。

我可以怎么办呢?我什么都干不了,这些事情已经超乎了我自己能解决的范围。这个时候,作为单位宿舍的易耗品,而且已经到达工作年限的易耗品,单位不管,让员工自行解决。你给我提供服务,我有偿接受修理或者某些配件的更换,我完全可以接受,但这种不管的做法无情且无理。

© 2004 - 2026 我的天 | Theme by xrspook | Power by WordPress