安利UWaterloo ECE751 分布式系统

本来想把上过的几门课写在一起，但是太爱这门，写了好多，那就单独成帖吧。
一 简介:
ECE 751 Distributed & Network Centric Computing。其实就是分布式系统，强烈推荐。老师人非常nice，讲得好，内容有趣、覆盖广，assignments和lecture内容及industry中用到的东西都紧密相关。这门课有对应的本科生版本 (ECE 451)，因此内容和assignment都设计得十分用心。没有TA，所有事情都是professor亲力亲为。piazza上理论及assignment相关的问题老师都会及时、细致地回复。这门课是fast-paced, 最好有java以及多线程的基础。（第一个term选没有相关基础会比较难, 第四个term选可能任务量大影响找工？）
二 课程内容：
architecture, RPC, distributed file systems, MapReduce & Spark, consistency, replication, fault-tolerance, distributed transaction, Kafka.
三 评价标准:
50% assignment + 10% quiz + 40% project.（恢复线下后会有考试）
四 编程任务：
都用java，5选4。任务指导书说明都比较清晰，每个编程任务的评分基本上分为correctness及performance (latency and throughput)两部分。任务截止前五六天左右，可以先提交一次代码, 老师会帮你测试（不计分），反馈给你performance的表现。
第一个必做，单人完成：client server system for processing graph data。需要用到TCP socket、多线程和文件I/O。
后面3个三选二，1-3人组队完成
第二个利用Thrift RPC，把已有的BCrypt扩展成一个多线程的服务。
第三个是MapReduce及Spark Stream（Scala写）相关的4个小任务，处理电影打分。
第四个利用Zookeeper和Thrift RPC, 实现一个fault-tolerant的有主从备份的服务。当primary server挂了之后，backup server能立马接手。
第五个是Kafka Stream相关的任务。
五 Project:
. Waral dи,3类内容可选：
1. literature survey.
2. deal with real-world data set using an open-source distributed software platform.
3. build your own distributed system (from scratch or use framework)
要交10-12 IEEE格式的论文，并做展示。
六 感受:
我觉得assignments都很有意思（当然也很有挑战性）。虽然浅尝辄止，但是能让你有hands-on experience并且为你打开以后自学相关内容的大门。
我是第一个term上的，没有找到队友。提前物色好队友很重要。assignment有问题一定尽早在piazza上和教授交流。
这门课之前都是fall开设，但是21 fall暂定的课程安排上没有751. https://classes.uwaterloo.ca/grad.html 1219。可以邮件询问professor, 如果不开，可以表达一下希望开设的意愿。

朋友们，走过路过记得加米喔!




补充内容 (2021-05-03 21:03 +8:00):
【补充】是给loo meng的同学安利，没有资源。标题没有写清楚, sorry。

好像很不错的样子 请问下有资源分享一下吗

Mark,以后选上

不错不错，想学分布式

29342969 发表于 2021-5-3 14:23
好像很不错的样子 请问下有资源分享一下吗

sorry啦，没有资源。可以考虑MIT6.824？公开的，很多资源，https://pdos.csail.mit.edu/6.824/schedule.html