数据工程师big data常用知识点总结

hrcheungg 发表于 2021-5-14 14:07
想请教楼主，de对于new grads需求量是不是不高啊？我在国内滴滴和字节做过de intern，但是看us的opening都 ...

de比较看重经验pipeline的design，还有很多技术栈都是工作中才会用到的，学校里基本不会接触到，好像也没有DE专业，确实不太适合new grad

来我收藏吃灰加1

nn960208 发表于 2021-5-11 21:19
这是一个非常好的问题。我在一家小独角兽做de，最近公司准备上市急需招人，近半年来基本每周都有面试，但 ...

已加米，请问楼主用pandas实现一个pipeline一般会写什么题目呢？怎么训练呢？比如说现场会给一个什么样的input/output?
- 是给一个pandas.dataframe然后处理完输出一个pandas.dataframe吗？
- 是实现一个简单的 .pipe可以调用的函数吗https://pandas.pydata.org/docs/r ... DataFrame.pipe.html