另类的Data Engineer, 分享一下自己的求职及工作感悟

liweisherry 发表于 2020/03/29 04:05:48
现在做database developer 想转de 不知道该补充哪些知识呢

可能需要一些跟ETL相关的技能和知识吧！我不太清楚各个公司对这两个职位的定位有什么不同我。我们team比较小基本上要求我们都得会😂

楼主可以推荐一些相关学习资料或者面试考查要点吗？感觉这个职位信息并不多的样子

今天发现了一个还不错的关于MySQL的资源～https://www.slideshare.net/ZendC...-mysql-presentation

nn960208 发表于 2020-3-28 00:51
这个问题有点太大了，我争取周末抽时间总结一下我在面试的时候准备和被问到的问题。
大体上会集中在对于 ...

好的！希望楼主更新一下etl会被常问的问题！！！
我被问到incremental load和scd 这种方面tricky的细节 没怎么做过只知道理论。。

applejuice404 发表于 2020-4-8 00:46
好的！希望楼主更新一下etl会被常问的问题！！！
我被问到incremental load和scd 这种方面tricky的细节  ...

今天特意抽时间写了一篇关于etl的技巧的帖子但是不知道为什么发不出去！！！

蹲一个AWS Toolkits👀

预祝楼主转身份顺利
同蹲一个AWS

liweisherry 发表于 2020/03/29 04:05:48
现在做database developer 想转de 不知道该补充哪些知识呢

SQL + Python/Scala+ Spark + AWS/Azure + a little ML

刚工作就能了解这么多，挺厉害的！

yswang9024 发表于 2020/04/19 11:11:40
预祝楼主转身份顺利
同蹲一个AWS

Lz最近准备好好研究一下 AWS GLUE 和 LAKE FORMATION，这两个功能都比较新， lake formation 更是去年才开放试用的。感觉未来这两个services 会串联起很多其他主要功能比如S3，RDS，Redshift 之类的。
AWS Glue 最近好像也有些更新。 之前我使用过crawler 和 job。 不过自己使用下来感觉Job 需要配合它的Notebook 类似Jupyter notebook 但这个需要付费使用可能对于普通的童鞋不太友好！