谈谈system design的面试方法

我想要offer真的 发表于 2020-12-27 03:13
其实我也很好奇。就是我发现我不太会的好多都是spark和hardoop那种偏ml的，这个是不是sde不考啊。我是sde

楼主简历上有mle的项目吧，可能被分到mle组了，anyway，对我帮助很大，谢谢楼主！

huangy17 发表于 2020-12-27 02:20
Hi LZ 关于你主贴提到的两个资源，方便具体说一下嘛？我没有找到。
“比如dropbox， 大家看了youtube他家 ...

dropbox https://www.youtube.com/watch?v=PE4gwstWhmc&t=3176s
concurrency 的论文：
https://www.researchgate.net/publication/220910159_Dynamo_Amazon's_highly_available_key-value_store
https://static.googleusercontent ... ve/gfs-sosp2003.pdf

kittycerry 发表于 2020-12-27 03:15
楼主简历上有mle的项目吧，可能被分到mle组了，anyway，对我帮助很大，谢谢楼主！

不是的不是的！我没有考！是我总结的亚麻面经，recommendation，metrics啥的特别多。。。其实我也不想复习了，是不是不需要呀？我不太懂spark其实

我想要offer真的 发表于 2020-12-27 03:19
不是的不是的！我没有考！是我总结的亚麻面经，recommendation，metrics啥的特别多。。。其实我也不想复 ...

哦哦这样啊，那谢谢楼主帮我总结了哦，正好需要呢～

我想要offer真的 发表于 2020-12-27 03:17
dropbox https://www.youtube.com/watch?v=PE4gwstWhmc&t=3176s
concurrency 的论文：
https://www.res ...

楼主好人，升职加薪 :DDD

请教下楼主kafka的pros and cons都有什么呀？以及kafka对应有别的工具可以替代吗??

essence-16 发表于 2020-12-27 05:38
请教下楼主kafka的pros and cons都有什么呀？以及kafka对应有别的工具可以替代吗??

我自己知道的是kafka带topic，可以分发到不同的worker上，最新的kafka还可以保证at least once, 有concurrency的时候他可以帮忙维持序列。主要也是有时候需要异步加速。缺点我听小伙伴说，大概是kafka自己也是会挂机的，挂了就凉了。其他的mq工具可以吧，rabbitmq， 还有aws的sqs好像是会有一些比较有意思的功能的，但是我其实另外两个都不是太懂

我想要offer真的 发表于 2020-12-27 05:49
我自己知道的是kafka带topic，可以分发到不同的worker上，最新的kafka还可以保证at least once, 有concur ...

kafka是对飚的kinesis，sqs比较落后了，每个event都只能pop一次，pop完没存下来就没了。

fatfatjoey 发表于 2020-12-27 06:01
kafka是对飚的kinesis，sqs比较落后了，每个event都只能pop一次，pop完没存下来就没了。

kinesis 完全不懂哈哈哈。

我想要offer真的 发表于 2020-12-27 07:19
kinesis 完全不懂哈哈哈。

我是记得sqs可以保证exactly once好像，也是听别人说的自己不懂