亲手造成的运维事故:在 Live CD 环境下部署并运行了 8 个月

2023-09-18 07:25:17 +08:00
 oblivion
前情提要:今年春节时去部署了一套内部系统,访问量不大,加上临近春节协调资源难,就先单机部署了,
对方提供的是 H3C 的物理机,准备安装 Ubuntu 系统,对运维要求带桌面安装,
中途被电话打断,回到机器旁边看到已经在 Ubuntu 桌面了以为对方运维帮装好了,
于是直接部署好了我们的系统,测试没问题就离开了,后面也一直相安无事,没出过什么问题。

直到昨天晚上组里同事去给他们更新部署,由于各种巧合提示磁盘空间不足,于是各种操作后给重启了机器,
发现.....进 Live CD 桌面,目录是空的,重启弹出光盘,提示找不到启动磁盘,
通宵一夜后就在刚刚给我打来了电话,我:????
各种记忆恢复术后想起来,当时 Ubuntu 压根就没装进硬盘啊?

由于是单机部署,暂时没想到能恢复数据的方法...
33576 次点击
所在节点    程序员
176 条回复
EEEEx
2023-09-18 09:57:16 +08:00
反正主锅不是你
chenliangngng
2023-09-18 09:59:41 +08:00
8 个月,这要寄啊
Sokia
2023-09-18 09:59:47 +08:00
过于逆天了 发给运维同事了
noErr
2023-09-18 10:03:04 +08:00
@wonderfulcxm 看起来已经重启啦,,
oneisall8955
2023-09-18 10:04:05 +08:00
Linux 真稳😆
Jreen
2023-09-18 10:06:04 +08:00
这个经历真够离谱啊……
zhangyq008
2023-09-18 10:06:37 +08:00
看你们的甩锅技术了。。。
qiyilai
2023-09-18 10:07:52 +08:00
成功缓解了周一上班的不适
alsas
2023-09-18 10:13:25 +08:00
卧龙凤雏
yolee599
2023-09-18 10:14:48 +08:00
Live CD 运行 8 个月不挂也是真的牛批!
excitedXXX
2023-09-18 10:17:38 +08:00
live CD 遗言:这辈子值了。
oblivion
2023-09-18 10:17:50 +08:00
@lrh3321 #2 @roundgis #17 @yfixx #21 某种意义上来说...数据确实不算重要,年后就忘了这件事了,甚至早上还想了几分钟什么时候有这个系统了

@cmdOptionKana #5 @msg7086 #14 正常我们是做了备份策略的,只不过对方在内网用,没公网,临近春节找不到人开个 minio/ftp/nfs 之类的服务给我们做备份用,年后这事也忘记了,一直没出过问题

@davidyin #9 是对方运维强烈要求带桌面,正常我们也就 cli 部署了

@Routeros #10 是啊,真稳,Live CD 跑那么久都没出问题

@wuzhewuyou #15 @des #16 @devopsdogdog #18 组里另一个同事昨天晚上去搞的,他发现磁盘没分区没挂载,也没想到居然是在 Live CD ,手动分区挂载准备迁移数据发现挂不上,就直接给重启了

@lloovve #3 @k9982874 #12 @crayygy #30 @wangxiaoaer #33 @darksword21 #36 @goodryb #37 当时临近春节,对方各种催他们想早点下班,第一次在物理机装带桌面的部署,我也没在意桌面的 Install Ubuntu 图标,关键是呢,一切都太顺利了,内网连接正常,usb 共享了 4G 网络进去,也正常上网,apt 更新,装各种依赖,dotnet restore ,npm install ,docker run ,全程一次性完成没出问题,万万没想到这是在 Live CD ,本想春节后加个副本和协调个备份服务的,这事给忘记了
msg7086
2023-09-18 10:20:01 +08:00
@oblivion #51 apt 更新完竟然没重启这是我没想到的。
一般至少要重启一次,测试一下 docker 在重启后有没有自动起来吧。
liuhongbind
2023-09-18 10:20:19 +08:00
这能运行 8 个月,也是 6
assiadamo
2023-09-18 10:20:42 +08:00
今天的好心情来源于此
Raint571
2023-09-18 10:21:41 +08:00
忍不住大笑了起来
ysc3839
2023-09-18 10:24:57 +08:00
楼主能否透露一下后续情况吗?是否因此受到处罚啥的?
idblife
2023-09-18 10:29:25 +08:00
忍不住笑了。。。
可以列入奇葩故障排行榜
defunct9
2023-09-18 10:32:25 +08:00
必然还是你的锅,Live 系统 df 一把一下就能看出来。
Basstorm
2023-09-18 10:35:10 +08:00
真的牛逼,整笑了

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/974678

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX