应该是要被开除了

匿名用户 发表于 2023-9-22 19:09
看到众口一声说不能认错有点震惊。一般死不认错是跟外组撕逼出的问题，没有特别明显的谁对谁错，你不认错老 ...

Being defensive/not taking responsibility v.s. going out of your way to volunteer apologies are two totally different things.

Apparently he wasn't being defensive, and he took full responsibility by fixing up the issue, leading postmorterm and proposing improvements to prevent similar incidents in the future, and he even presented in front of management. He has gone above and beyond since the incident. His managers should have all known how responsible he was.

What we are advising him against is chasing management to volunteer apologies and asking for forgiveness. These actions are excessive and unprofessional, and usually would do more harm than good. When you keep reinforcing certain things on people, they would take it for granted.

Don't dwell on what happened. It's time to move on.

匿名用户 发表于 2023-09-22 17:09:15
看到众口一声说不能认错有点震惊。一般死不认错是跟外组撕逼出的问题，没有特别明显的谁对谁错，你不认错老板也会保你。像楼主这种，没有按照流程，所以甩不到流程的锅，小弟没有review，说明他新人没有带好，

其实大家说的是认错的范围，这种错误有管理流程的问题，也有他个人的问题。其实大家担心的是，问责时候上级对管理流程上的问题视而不见，但对个人问题不断深究。现实的情况是，流程缺陷是问题产生的根本原因。

匿名用户 发表于 2023-09-22 10:45:40
千万不要认错！把这事给喜办！

请教一下如何喜办？

单从你的描述看就能发现很多流程问题。如果你能归纳总结好问题并修复流程相信对你们公司是个很有价值的事情。毕竟楼主你没有主观故意的情况下就能造成这种影响，显然你们高估了自己系统的可靠性和安全性，如果哪个员工某天不想好好干了，岂不是结果会更坏。

从你的描述我能看到的有这么几点：
1. “一下把所有的高流量的pod的配置文件全改了“。 你们系统应该有个自动检测流量部署的环节，像这种高流量大范围更改应该走canary。
2. “因为我正好在带新人，图方便我就发给他review了” 一般review请平级或者更资深的人，像production config应该有专人review才能提交。
3. “之前写了alert，但是只发到我的邮箱“ production alert 应该自动默认抄送oncall。
4. 整个process只有你一个人加onboarding junior就可以完成也是需要改进的。
希望对你有帮助:)

10%用户受影响三小时听起来也不是什么天塌下来的事，你应该没事，可能今年performance review会降一级。

没啥好道歉的。

别人还没机会搞高净值客户呢。你都能直接往prod上push config，说明你们公司流程有严重疏漏。把这个写成learning course，再出个改进规划。今年的大project就搞定了。懂事的老板马上给你升职加薪（反正都影响了，换了别人还可能再来一次。你态度也不错，还主动出文档，帮助公司改进。这又能做公司跟客户吹牛的基础“你看，谁不犯错，我们都改了，还改的很好，怎么样，继续续约我们吧。别人还没这机会犯错误呢。你们去了别家还得再损失一次。”这样大客户可能更牢了。）这不就丧事喜办了么？

你呀，别老想反思自己的问题，多想想怎么给自己加戏。这样才能走向人巅峰呢。

不成，反正老子也不在这干了。对吧。别让公司告你就行了。

补充内容 (2023-09-23 10:01 +08:00):

最重要的是，你一定要相信，贵司是那些高净值客户的最佳选择。他们是不会轻易离开的。沉默成本太高了。

起码你以后有个BQ的故事可讲了。

点进这个帖子，大开眼界！

匿名用户 发表于 2023-9-22 16:01
楼主确实犯了一个大错
如果楼主是新人，还情有可原，但从描述里看是很得manager trust的老员工，不应该犯 ...

非常同意这位同学。道歉是中国思维。在美国，绝对绝对不要道歉。一旦道歉，你一定会被开。不道歉，还有周旋的余地。

从改代码到release进prod环境到收alert都只有你一个人就可以搞定这件事本身才是最大的问题吧，这中途没有任何流程可以让别的同事来评估测试嘛。
反正最差不过是走人，你有身份也没有2个月里找到工作的困境，那不如放平心态好好写写总结提出点改进意见，说不定还成一件好事了。