真诚求问，大家在工作中犯过最严重的错误是什么

1somorphism 发表于 2020-5-2 10:58
实力把前东家主站搞跨两次，平均每次一小时，关键公司也不小，金融界基本都知道，我已经卷铺盖跑路了

哈哈哈，为什么这么悲伤的事我会笑出声来

alexsss 发表于 2020-5-2 11:00
哈哈哈，为什么这么悲伤的事我会笑出声来

U R NOT ALONE

几年前批了一个数据库小组的请求，把几个很旧的table给drop了，没想到另外一边一个script以为找不到table就说明里面的内容应该被下线，于是prod上大面积的信息消失了……

过了好几个小时才发现问题，晚上怂怂地加班把被删掉的信息全部reflow回来（幸好还有备份），然后outage post mortem……

学到的经验就是：

- 犯错是肯定会有的，犯了错就勇敢承认，先把精力放在纠错上，然后再来反省有什么可以预防类似错误重复出现的方法。
- 优秀的团队要是有队员出了错，也一定是先努力帮忙纠错，而不是指责甩锅。所以要是你的队员/老板这个时候过分指责你，心里掂量一下，可以考虑要不要找下家吧。
- 很多时候人为的错误其实是process不够完善造成的。比如不小心把github dev branch merge 到了master/prod branch，表面上是人工操作的错误，其实是process没设定好，该画的界限没画好的问题。优秀成熟的老板应该利用这个机会改善process, 让团队成员有一个安全的地方勇敢实验勇敢犯错 （dev environment, automated tests, qa，regular backup 等等）

alexsss 发表于 2020/05/02 11:00:25
哈哈哈，为什么这么悲伤的事我会笑出声来

为什么我看到这一条的时候笑出了声🤣

holdering 发表于 2020/05/02 10:47:47
直接把与CTO提问题的slack channel 关闭了

哈哈哈哈哈哈哈哈哈

写了while死循环deploy到production然后跑了一天。 见过同事改prod数据 delete语句没加where

ChonkeyOwl 发表于 2020-5-2 11:09
几年前批了一个数据库小组的请求，把几个很旧的table给drop了，没想到另外一边一个script以为找不到table就 ...

很感谢你的认真回答，受教了，就是忍不住还是会觉得很受挫，多谢！

mrno5zzz 发表于 2020-5-2 11:12
写了while死循环deploy到production然后跑了一天。 见过同事改prod数据 delete语句没加where

我的老天鹅啊，prod数据库我真是碰都不敢碰的，修改操作一定是要有人shadow我我才敢做

WFH开会，戴着耳机去上厕所，结果上厕所的时候忘关麦克风了

自己好像还没犯过大错，印象最深的别人的错，一个是把老板的fb给删了，一个是intern把公司网站给搞挂了几小时