Introduction to Data Science Week 3 讨论加分贴

楼上的你们第六题都怎么做的，hard code进去矩阵维度么？？

小K 发表于 2013-5-25 00:04
楼上的你们第六题都怎么做的，hard code进去矩阵维度么？？

我直接用了矩阵的维度。

TA发的一个帖子（Problem 6 Matrix Dimensions）：
”For problem 6, it is okay if you hardcode the input matrix dimensions into your solution. The autograder also uses the same data that is provided to you in the datasci_course_materials repository, so it is safe to use the dimensions of the provided data.“

it is of course ok to pass the grader this way, but does this look like a satisfactory answer to you?

i am really unhappy with this problem

running MR twice should be the way to go, and it is so not a good idea to test the code on exactly the same set of input/output they already give out

小K 发表于 2013-5-25 10:06
it is of course ok to pass the grader this way, but does this look like a satisfactory answer to you ...

K妈说得对，

我资质尚浅，直接走了捷径，惭愧啊……
有的题目能做出来就不错了，没有细想是不是最好的答案。

PO作业+吐槽。。
这次lecture的例子挺不错的，不过感觉还是缺了点什么，可能就是K妈说的老师没把整个动态过程讲清楚吧。我自己本身对MapReduce的认识其实也不深，后面还需要多找这方面的资料来认真专研。

然后这次的作业又坑爹了。。
做quizz的时候，选part4的python完全跑不动，整天报错。最后是硬着头皮选part2的Java来做的，幸好quizz的代码还是很简单的，如果不是我这个Java盲估计就做不完quizz了。

然后做assignment的时候，1到5很快就扫完了，就是想吐槽下第四题，那个(person,friend)和(friend,person)根本不应该同时出现吧。我做的时候，是按只输出(person,friend)做的，然后发现要输出两个后懒得改，直接在输出(person,friend)的后面马上输出(friend,person)了。。

做到第6题，刚开始按1-5题的思路做，发现明显差了一步，基本就是只mutiply,但不能把各个element加起来算出最后的AB。
为了交作业，我刚开始是很霸气的在map的时候设置一个key =all 把整个矩阵A和B直接输出到Reduce,然后就是一般的矩阵乘法了（就是在MapReduce的框架下，把Map, Shuffle和Reduce三个部分的作用基本都废了）

后面也试了直接hard code的方法，还是觉得不爽，就去尝试做两次MapReduce的解法。刚开始的时候，是想直接在一个py文件里面完成两次MapReduce, 但自己水平不够，基本想不出该怎么下手。
纠结了好久以后，想到一个折中的方法，用两个py文件分别做两次MapReduce。就是先用一个Mutiply.py输入A B的数据，通过MapReduce的方法输出对应元素相乘的结果，存储在名为elements的文件里。 然后再用一个Sum.py输入elements的数据，再次通过MapReduce把对应的元素加起来最终得到AB的所有元素。不过想到这个方法后，发现自己对.json的处理一窍不通，估计要实现也要debug很久，最近时间又很紧张，只能把这个想法放一边，等后面有时间再回来实现了

#po作业#

同意楼上，3我做的时候也只输出了(person, friend)，感觉这样更合常理。 看了grader 又输了一遍(friend,person) ==

#Po作业#

第六题我用python 的list 相乘做的，在论坛上有人说到，用了感觉挺方便的
la = [1,2,3,4]
lb= [2,3,4,5]
c = [a*b for a,b in zip(la,lb)]
所以c就会是
[2,6,12,20]

#po#作业

额。。。消耗了一天拖延时间=-=
感觉1,5两题简单爆了，第六题又难爆了。
还得hardcode。这样的话思路不难，就是过程有点烦躁。

小K 发表于 2013-5-22 13:27
quiz 有人做么
我按这个的做法：https://class.coursera.org/datasci-001/forum/thread?thread_id=2707&po ...

quiz好dt啊，我还出现
Server error executing Python Kernel() function。。。
kernel我都没改的。。。