meta VO 设计题

倒序浏览 · 2024-3-13 06:15:15

您需要登录才可以下载或查看附件。没有帐号？注册账号

x

wikipedia crawler，需要crawl url exact once, 以及distribute load to cluster

您好！
本帖隐藏的内容需要积分高于 188 才可浏览
您当前积分为 0。
使用VIP即刻解锁阅读权限或查看其他获取积分的方式

url，怎么直接到了content downloader，后来加上了crawl service

小南瓜大草莓

请问是system design还是product design ？

匿名用户-SJXBR *2024-3-13 10:33:34* · 2024-3-13 10:33:34

请问是infra还是product path

匿名用户-Z5HEG *2024-3-13 23:51:28* · 2024-3-13 23:51:28

请问vo 的系统设计怎么share屏幕的啊

匿名用户-AKQVI *2024-3-14 04:33:12* · 2024-3-14 04:33:12

就算15B的url，全存checksum也没多少空间消耗吧，bloom能省点空间，总点防止缓存穿透吧，比如一开始爬的时候，大量都是不重复的。缺点是少量false positive，可以用bloom + cache + db，来破

匿名用户-1WOMR *2024-3-15 08:37:50* · 2024-3-15 08:37:50

同问是 system design 还是 product architecture, 谢谢版主！

匿名用户-PVHUD *2024-3-19 06:34:20* · 2024-3-19 06:34:20

小南瓜大草莓发表于 2024-3-12 15:29
请问是system design还是product design ？

infra。 zszszs

匿名用户-PVHUD *2024-3-19 06:34:30* · 2024-3-19 06:34:30

匿名用户发表于 2024-3-14 17:37
同问是 system design 还是 product architecture, 谢谢版主！

infra。 zszszs

匿名用户-PVHUD *2024-3-19 06:34:55* · 2024-3-19 06:34:55

匿名用户发表于 2024-3-13 08:51
请问vo 的系统设计怎么share屏幕的啊

用的 excalidraw，可以collaborate

匿名用户-PVHUD *2024-3-19 06:35:19* · 2024-3-19 06:35:19

小南瓜大草莓发表于 2024-3-12 15:29
请问是system design还是product design ？

infra。 zszszs