LinkedIn Top10高频系统设计问题总结+讨论

谁能讲讲到底怎么用kafka + samza. 我为什么感觉samza和top k无关啊。谢谢了。

returning 发表于 2017-11-5 14:47
谁能讲讲到底怎么用kafka + samza. 我为什么感觉samza和top k无关啊。谢谢了。

不一定非要samza，但是kafka里面的streaming messages怎么也得有个streaming processing 的系统来
consume和处理啊。反正就是samza，spark之类的。因为samza和kafka可以说是无缝链接，所以选用
它也正常。

Felix1218 发表于 2017-10-1 10:44
谢谢,
"一个小时， 一天或着一周里，就是分级存储的思路，分成好几个bucket" -- 请问一个小时/一天/一周 ...

基本思路是一小时的窗口过去后，把它加入一天的bucket，然后clear重新接收一小时的数据

这个帖子太棒了，感觉这种问题都不知道该怎么回答。

讲的很好 谢谢了

top k 的题可以参考这个链接：https://soulmachine.gitbooks.io/system-design/content/cn/bigdata/heavy-hitters.html
还有其他题上面讲的也特别好。

smallwarm 发表于 2017-9-26 13:23
2，3，7 是Top k问题。

系统设计千万不要直接上名词。及时你知道top k问题可以kafka + xxx 处理，你也别 ...

请问ｋａｆｋａ的设计思路是什么呀？有没有相关资料呀？谢谢。

Felix1218 发表于 2017-10-1 11:01
你好, 可以问问为什么需要用到Kafka或者相关思路吗? 只是因为构成producer和consumer的model, 让client不 ...

我感觉主要因为ｋａｆｋａ是领家搞出来的。。。

多谢楼主啊，好人一生平安

感谢楼主分享！很有用的信息