LinkedIn Top10高频系统设计问题总结+讨论

fei'c非常感谢，非常好。

sushu1122 发表于 2017-9-27 03:24
多谢指点
请问
“如果实时性，精度要求不高。。。在client 累计到10次以后，发个+10的request”

这就是batch吧

freipan 发表于 2017-9-25 12:39
2,3,7都是top k query。设计的思路是kafka + samza.

能否说一下kafak思想？
有没有相关资料啊  多谢啦

感謝樓主,很有用的信息

smallwarm 发表于 2017-9-26 13:23
2，3，7 是Top k问题。

系统设计千万不要直接上名词。及时你知道top k问题可以kafka + xxx 处理，你也别 ...

请问可以详细讲一讲Top K的问题么？算法方面很多文章已经讲过了。
但是distributed system方面却很少有人涉及。

单从这题来说，我觉得如果本身没有类似kafka这样的流数据库，也许我们并不需要搭建一个？直接一个service就够了吧？kafka这样的流数据库放在这里的作用是什么呢？

关于Monitor System, client 跟它交互式，应该是哪种方式：不停的给服务器发request，还是直接搞个socket connection，随时交互？
有经验的请分享经验哈

umialpha 发表于 2018-12-28 03:13
请问可以详细讲一讲Top K的问题么？算法方面很多文章已经讲过了。
但是distributed system方面却很少有 ...

可以看看油管上面俄罗斯大哥的视频，讲得非常详细。

umialpha 发表于 2018-12-28 01:13
请问可以详细讲一讲Top K的问题么？算法方面很多文章已经讲过了。
但是distributed system方面却很少有 ...

如果不用kafka，相当于要自己实现一个kafka，当然可以展开讨论，但是需要的相关功能不能没有，比如queue，durability，scalability，notification等