语雀这路子太野了

2023 年 10 月 25 日
 nekoharuya
https://mp.weixin.qq.com/s/WFLLU8R4bmiqv6OGa-QMcw
他们的公告的链接
考虑到 v 友的水平，我抛砖引玉分析一下
这帖子的意思大概是说，由于临时工在升级维护工具的时候，工具没有严格测试，直接上生产环境，工具的 bug 导致数据库服务器下线，联系硬件团队，硬件团队说上不了线，摆烂不玩了，你们自己恢复备份吧，然后花了四个小时恢复，俩小时验证数据，成功上线
我和几个朋友讨论了下，觉得非常的，不可思议
这是 2023 年的，语雀这个体量的公司，做出来的事情
正常的架构思维里，所有的服务，就不应该跑在同一台机器上，包括数据库，最次也该是个主从集群，集群下面的机器单例再考虑 raid 之类的东西
在这个设计下，不存在上不了线开不了机这种事情，机房被修卡军团占领了都没事
至于网上传的什么之前的技术负责人跑路了，新人不会操作
就正常的 devops ，后台管理面板里，全自动维护，包括版本控制，回滚，备份，集群，镜像，机器冗余，全部自动化管理
这不该是现在的标配吗
技术负责人跑路，新人不会操作，这句话假定的前提是，这一切都是手工完成的
语雀这么大公司，表现得跟路边三五个人创业的草台班子一样
32876 次点击
所在节点    程序员
183 条回复
nekoharuya
2023 年 10 月 25 日
@lambdaq 研发和运维一体，就叫 Devops ，你看，这个词在这个帖子里，应该是我用得最多的了
hancai
2023 年 10 月 25 日
上个月我们公司部分服务不可用 10 分钟，人事要扣我 50%的绩效。语雀的运维估计得开掉一批，换一批更坑的替代。
kaedea
2023 年 10 月 25 日
再草包有人能纠错就不算草包，没人敢纠错的才是真草包。
iugo
2023 年 10 月 25 日
> 导致华东地区生产环境存储服务器被误下线
> 升级硬件版本和机型，实现离线后的快速上线。该措施在本次故障修复中已完成

"下线" 这个词应该就是下线, 没有数据丢失. 不能再次上线正是因为自动化工具不支持, 才导致的. 自动化工具应该之前做过升级, 后续就只支持新机器了.

语雀做的就是找了新机器, 备份了老机器上的数据, 在新机器上重新部署了老机器上的数据服务.

我觉得问题核心应该是 "及时升级" (无论是软件依赖还是底层硬件).
tf2
2023 年 10 月 25 日
@nekoharuya s/devops/devoops/g
hancai
2023 年 10 月 25 日
@iugo 不支持自动化工具，就采用老机器做数据迁移，是说不过去的。
seeu2ex
2023 年 10 月 25 日
@lambdaq #90 国内中小公司少见工作时间发版吧
tf2
2023 年 10 月 25 日
@seeu2ex 现状的确如此。但是我讨厌这个现状。
VYSE
2023 年 10 月 25 日
@wangshushu #51 两家公司, 啥时蚂蚁把语雀卖给阿里云了
jmljava
2023 年 10 月 25 日
目前的现状可能是只要东西能跑,这就是一个稳定安全的服务,至于什么时候暴雷,相信下一任的智慧
o562dsRcFqYl375i
2023 年 10 月 25 日
修卡军团可还行 DOGE
hancai
2023 年 10 月 25 日
@seeu2ex 我上家公司新来了个老大，说要做到上班时间发版， 出了一次生产事故后，发版时间反而比他来之前还延后了半小时...
cmlx1014
2023 年 10 月 25 日
阿里的东西，不赚钱就不重视，结果出了大纰漏。前面的会员也是吐槽得不行，连玉伯都走了。
KickAssTonight
2023 年 10 月 25 日
是人就会犯错
dragondove
2023 年 10 月 25 日
再大的公司都会出纰漏的，gitlab 出现过线上库被删的问题。之前某 dns 提供商出错导致大量美国的网站没法访问。我觉得语雀这个算是比较轻的问题了
silencil
2023 年 10 月 25 日
@cherbim 我建议别抨击这个，我以前待的一家公司开发的系统，每次都是晚上十点多开始升级，每一两周来一次，每次升级就是接近一个通宵。同为程序员，我觉得服务短期不可用不会死（做好了各种回滚策略，白天升级也不至于导致服务不可用），长此以往的熬夜升级服务是真的会猝死。
seeu2ex
2023 年 10 月 25 日
@hancai #112 主要是加班一点福利都没，😑
yulgang
2023 年 10 月 25 日
他们没有运维团队和灾备系统😁
silencil
2023 年 10 月 25 日
说阿里草台班子也大可不必，至少从概率上来说，阿里的员工技术、架构等经验应当会大于大部分公司。程序员老是相轻，与我见过的理发师的做法是一样的，经常理发的时候理发师都要抨击一下上一任给我剪头发的剪的烂，实则自己也是下一次别人抨击的对象。
codcrafts
2023 年 10 月 25 日
我有个问题没想明白，存储服务下线了，为啥官网也挂了呢？有没有大佬能解答一下的

这是一个专为移动设备优化的页面（即为了让你能够在 Google 搜索结果里秒开这个页面），如果你希望参与 V2EX 社区的讨论，你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://v2ex.ih06.com/t/985202

V2EX 是创意工作者们的社区，是一个分享自己正在做的有趣事物、交流想法，可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX