你司有没有过运维事故?

2018-08-08 13:45:44 +08:00
 AllOfMe
删库,update 没加 where,rm rf /,误删 glibc 等等运维事故,小至两三人的创业公司,大至如最近的腾讯云磁盘事故,都有可能发生。
你们公司有没有过类似的事故?这些犯错的员工下场一般是怎么样的?
18134 次点击
所在节点    程序员
154 条回复
AllOfMe
2018-08-08 20:22:03 +08:00
@gamexg 是啊,和不要疲劳驾驶一样,服务器操作更要小心
hikaruchang
2018-08-08 20:27:19 +08:00
有啊,但是每次操作服务器之前最好还是做个快照,就连 update 都得做快照以及操作记录,不然哭都没地方
fiht
2018-08-08 20:33:30 +08:00
上个月手抖在后台把一个用户的云盘删了,没想到要被索赔一千万。还好公司出面,赔了我一年的年终奖,赔了十好几万!
farseeraliens
2018-08-08 20:43:56 +08:00
@fiht 敢问您在哪儿高就,年终奖十好几万……
musclepanda
2018-08-08 20:44:28 +08:00
@farseeraliens 腾讯啊。。哈哈哈哈
scriptB0y
2018-08-08 20:44:34 +08:00
pytest 测试,如果你的数据库名字叫 abc,貌似会自动生成一个 test_abc 的库来测试,测试完之后删掉。然后我们测试环境连的数据库有一个名字就叫做 test_abc,跑完测试数据库没了……
GoLand
2018-08-08 20:44:54 +08:00
scriptB0y
2018-08-08 20:46:01 +08:00
从网上 Command+C 拷贝了一条命令,去生产上粘贴。Command + V 按下去,满屏哗哗滚动,才发现没复制上,剪切板还是之前拷贝的一段内容。

碰巧这段内容里面有个 rm -rf
v2dead
2018-08-08 20:55:54 +08:00
作为后端进一家公司一个礼拜就拿到一台关键业务服务器权限。心比较大的,那台服务器只有 root,也只用 root 登录。我习惯性搭一个虚拟机环境,下班走的时候随手 poweroff 关掉虚拟机。关闭 xshell 发现不对劲,关错了。。。。

之后打电话去机房开机,再重新开启服务,服务终止半个多小时。
没想到试用期居然还过了。。自此以后虚拟机再也不管了,直接按电源关机,虚拟机爱关不关。
helloSpringBoot
2018-08-08 20:59:34 +08:00
创业公司 不小心把库删了 还好有当天早上的备份 用户丢了半天数据 业务比较简单 影响还算可控
f2f2f
2018-08-08 21:24:03 +08:00
不删库的公司,那还是好公司吗
junbaor
2018-08-08 21:43:02 +08:00
层层审核下, 在线上执行了一条没加条件的 update 语句, 而且是订单表.
ytmsdy
2018-08-08 22:28:57 +08:00
xshell 同时开着生产管理和测试环境。
脑抽的把生产环境当测试环境。。
stefsui
2018-08-08 23:53:22 +08:00
新配置没生效情况下删除了旧配置,2 千万手机用户八小时打不了电话。我是负责恢复的
loser
2018-08-09 00:16:04 +08:00
新游戏上线被我 drop database ……
备份服被我 rm -rf

感谢老板不杀之恩
KasuganoSoras
2018-08-09 00:28:50 +08:00
不是公司,运营着个几千用户的小网站,机器放家里,结果突然停电导致用户数据丢了大半,后来就养成了随时备份的习惯。
imaning
2018-08-09 09:22:31 +08:00
@neoska 红绿色弱者连运维都不能干啊,因为有些色弱的看绿色像黄色啊。
imaning
2018-08-09 09:26:32 +08:00
@chnhyg 问下当年这个同事为啥离职,亏待了别人赶紧给补回来啊。
cece0417
2018-08-09 09:42:13 +08:00
去年来了一个运维新伙伴,不知道咋搞的,把 jira,wiki 的库给搞没了。我提的 bug 全没了。过几天,dingding 就搜不到他的信息了
chnhyg
2018-08-09 09:59:59 +08:00
@imaning 公司还是比较不错的,谈不上亏待吧,虽然我也不在了。 =。=

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/477926

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX