查看: 3383| 回复: 7
跳转到指定楼层
上一主题 下一主题
收起左侧

[题目讨论] 从Leetcode周赛崩溃,来聊聊scalibility

全局:

注册一亩三分地论坛,查看更多干货!

您需要 登录 才可以下载或查看附件。没有帐号?注册账号

x
本帖最后由 马保国骑马保国 于 2023-3-26 13:26 编辑

RT, 这周周赛崩了很久


本人对于这种高并发场景,只是看过国内某机构的 “高并发”秒杀课程,不知道实际开发到底应用的如何。所以想请教大佬们几个点

1. lc本身的架构是什么样子的
2. lc如何handle这种周六比赛的流量
3. 在原有架构的基础上,可能优化的点。

----

下面是个超级简单的架构图,暂时没想到message queue用在哪里?Maybe 当提交的时候通过mq 交给 test svc跑结果?


client ----> auth ---> CDN ---> LB ----> Server ----> Cache ----> Relational DB
                                                                                                \---> Object DB


(原图上传总是被截断)

从rate limit 信息可以看到Cloudflare,这个做了CDN (不知道有没有其他功能?)。
我的猜测:在比赛前,lc 后端服务器提前把题目放在cdn里面,等到点了放开访问权限。  (如果延伸一下,rate limit 是cloudflare处理的,看似这个优化应该交给cloudflare来做,maybe lc要多掏点钱)
看了b站的713报告,里面提到了4层LB+7层LB,这个技术也比较成熟,Cloudflare应该也用了? 如果这样的话,不知道lc自己的架构还有必要自己做4层+7层LB吗?
----
其他求助o点:
1.lc如何保存在db保存每个题的test cases的,有小有大case,比如10^5长度数组,或者10^8,是不是可以用blob类型存?
2. lc如何保存solution题解数据的,文本有不同的format,而且还有图片(图片常规操作是RDB只存个url,图片本身存在object DB)。 直接存markdown吗,想不太通。

另附 bilibili 2021.7.13崩溃官方报告

评分

参与人数 1大米 +10 收起 理由
instant_dev + 10 给你点个赞!

查看全部评分


上一篇:大家常浏览的Tech Company Blog有哪些?
下一篇:Tech Blog Search Site
推荐
han6 2023-3-27 12:42:12 | 只看该作者
全局:
swtcbl 发表于 2023-3-26 17:34
冲lz这id和头像点进来了😂 曾经影响了我整个青春期的人

楼主头像是谁?
回复

使用道具 举报

推荐
lllxin37 2023-3-27 04:46:01 | 只看该作者
全局:
不知道有啥好分析的,这种网站最多同时在线人数不超过十万,基本也就是2-4万左右。

更重要的是隔离代码和虚拟机,而不是扩展性
回复

使用道具 举报

🔗
 楼主| 马保国骑马保国 2023-3-27 08:28:57 | 只看该作者
全局:
lllxin37 发表于 2023-3-26 15:46
不知道有啥好分析的,这种网站最多同时在线人数不超过十万,基本也就是2-4万左右。

更重要的是隔离代码 ...

嗯受教了,隔离性是不是可以理解为AB隔离,A挂了B不会受到影响? 虚拟机在这里是什么意思,平常有看到虚拟机vm和docker的内容,这里的虚拟机是可以保证挂掉的时候不会挂太多还是别的原因?
回复

使用道具 举报

🔗
swtcbl 2023-3-27 08:34:00 来自APP | 只看该作者
全局:
冲lz这id和头像点进来了😂 曾经影响了我整个青春期的人
回复

使用道具 举报

🔗
 楼主| 马保国骑马保国 2023-3-27 08:35:25 | 只看该作者
全局:
lllxin37 发表于 2023-3-26 15:46
不知道有啥好分析的,这种网站最多同时在线人数不超过十万,基本也就是2-4万左右。

更重要的是隔离代码 ...

2-4w QPS不太大,一般的系统应该都能handle,我明白你说的点了,scalability其实没有必要优化,非常感谢
回复

使用道具 举报

全局:
完全不能理解LC 怎么会崩。
即使在peak time最多起几千个gcc docker就够了。
只能说做得太烂了……
回复

使用道具 举报

🔗
kaiwei0323 2023-3-31 15:51:17 | 只看该作者
全局:
感謝lz分享
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 注册账号
隐私提醒:
  • ☑ 禁止发布广告,拉群,贴个人联系方式:找人请去🔗同学同事飞友,拉群请去🔗拉群结伴,广告请去🔗跳蚤市场,和 🔗租房广告|找室友
  • ☑ 论坛内容在发帖 30 分钟内可以编辑,过后则不能删帖。为防止被骚扰甚至人肉,不要公开留微信等联系方式,如有需求请以论坛私信方式发送。
  • ☑ 干货版块可免费使用 🔗超级匿名:面经(美国面经、中国面经、数科面经、PM面经),抖包袱(美国、中国)和录取汇报、定位选校版
  • ☑ 查阅全站 🔗各种匿名方法

本版积分规则

>
快速回复 返回顶部 返回列表