你司有没有过运维事故?

2018-08-08 13:45:44 +08:00
 AllOfMe
删库,update 没加 where,rm rf /,误删 glibc 等等运维事故,小至两三人的创业公司,大至如最近的腾讯云磁盘事故,都有可能发生。
你们公司有没有过类似的事故?这些犯错的员工下场一般是怎么样的?
18134 次点击
所在节点    程序员
154 条回复
paparika
2018-08-08 17:26:20 +08:00
运维同学都是有故事的,开发一比弱爆了
wangcansun
2018-08-08 17:26:28 +08:00
@mossss21 这个方法好!!!!
jarnanchen
2018-08-08 17:46:22 +08:00
想起前东家的一件事,有个付费接口,好像是银行卡还是身份证的认证,调用一次多少钱的。
结果我们跑测试的同志,把几十万条数据跑起来了。跑了几个小时候才发现。
k9982874
2018-08-08 17:49:54 +08:00
我一直有一个习惯执行`rm`之前先顿一秒看下命令,不是故意的完全是神经反射,别问我怎么获得的这个技能。

另外最近脑抽把 git 仓库里的 development 远程分支删了,幸好有在操作之前有先把远程 pull 到本地的习惯,这个技能也别问我是怎么获得的。
daigouspy
2018-08-08 18:01:39 +08:00
@AllOfMe 这么重要的东西就应该放内核里,怎么可能让删的呢?
Mush
2018-08-08 18:05:48 +08:00
第一份工作的时候, 老大把线上服务器(web)删了.
Ansen
2018-08-08 18:12:09 +08:00
一不小心把线上游戏服务器给停了几百台,停到一半发现了,赶紧 ctrl+c, 但基本停完了,当时想的是 Python+salt 效率好高,2 秒钟发送了几百次停服指令
AllOfMe
2018-08-08 18:16:30 +08:00
@daigouspy 无法完全避免,除非做用户权限管理,但是大多数情况都是 root 直接上的。。。glibc 我这辈子是不会再碰了,有心理障碍
MinQ
2018-08-08 18:31:05 +08:00
@k9982874 我是习惯性把代码 git 到自己的 visual studio online 上,前几天手一抖在项目现场把写了两个星期的代码全删了,瞬间就觉得血液从脸上退下去了,缓了半分钟才想起来 git update 过了。最后花了一天时间重建了一个丢掉的配置文件
lychnis
2018-08-08 18:32:26 +08:00
@liuzhedash 啥公司。。。
nullornull
2018-08-08 18:39:14 +08:00
之前也看过类似不少楼上的运维事故,导致我第一次操作生产数据库的时候,满手是汗(貌似),精神非常紧张,虽然是有事务,可以回滚,也有备份,但是还是忍不住紧张,操作完之后还核对了很多遍.当然现在已经没啥感觉了,但是发现自己错误操作的时候还是会惊出一身冷汗.
嗷,我也干过卸载 yum 这样的事,虽然是在测试的服务器上,但还是被老大嘲讽了一通.
diveIntoWork
2018-08-08 18:40:41 +08:00
git 切换分支后,git reset --hard。。。
AntonChen
2018-08-08 18:44:42 +08:00
rm -rf ./* 写成了 rm -rf /* 从此之后不在 ./*
susunus
2018-08-08 19:21:46 +08:00
别动不动用啥 我司,你司的,用的不对哈,之前看着不爽,去搜了哈,觉得之前是的国企再用司哈
pluto
2018-08-08 19:30:58 +08:00
周一数据中心异常断电,部分服务器重启。
hzwjz
2018-08-08 19:40:52 +08:00
那些 rm -rf 日常是是使用 root 登陆服务器操作的么?🤔🤔
曾经手误 kill 的时候带上了-1,至此打死再也不用 root 用户登录,除非不到万不得已的时候…
gamexg
2018-08-08 20:09:18 +08:00
疲劳时别坚持。
前几天熬夜,连续两次误删文件,第二次快照恢复后立马不再操作休息了。
Hardrain
2018-08-08 20:17:53 +08:00
(生产环境)误删 glibc +1
还不是删了那个 symlink,是把那个 so 文件删了

兼职遇到的垃圾公司
AllOfMe
2018-08-08 20:21:33 +08:00
@Hardrain 是你删除的还是兼职公司人员删除的?后续是重装了吗
xiaoheshang
2018-08-08 20:21:42 +08:00
@AntonChen 其实我一直用的是 rm -fr *

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/477926

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX