📣 黑五价提前开抢|VIP一年通行证5折,蓝莓、Offer多多同步特惠
12
返回列表 发新帖
楼主: ychen134
跳转到指定楼层
上一主题 下一主题
收起左侧

转DE 打卡贴

🔗
 楼主| ychen134 2020-9-14 04:50:50 | 只看该作者
全局:
09/11周五改简历了
回复

使用道具 举报

🔗
 楼主| ychen134 2020-9-14 04:53:06 | 只看该作者
全局:
tifldn 发表于 2020-9-11 19:29
分享github上一个还不错的resource,在github上有一个"The Data Engineering Cookbook”。个人感觉比较适用 ...

谢谢!!!!
回复

使用道具 举报

全局:
bardky 发表于 2020-09-11 09:28:57
我也感兴趣DE,但感觉DE上岸太难了,他们对工作经验要求很高。很纠结! 另外一方面DE的project也没有头绪,不容易出彩。如果单纯做一个data pipeline,应用性不强的那种,数据量也上不去
本人在某家小独角兽做DE~根据我的日常工作和组里招人要求给大家点小建议~
1. 掌握Airflow/Spark 这类工具! 在我们这是必要的。
2. 多了解一些AWS/ Google Cloud Platform的 各种features。
(AWS 常用: S3, Redshift, RDS, Glue, 以及非常新的 Lake Formation。
     Google Cloud Platform 我们用的比较少,主要涉及的有Big query/ Google cloud storage)
3. 作为DE 不仅要对ETL有深刻理解还要对于数据以及数据库的应用有了解。 比如 Redshift 和 Relational database的各自特点。
4. 提供大家一个做side project的思路。 很多公司都通过Google Analytics得到一些用户数据, 但主数据库可能在AWS中(可能是Redshift/ Aurora之类的)。 可以尝试用写一个Airflow 的ETL Dag。

有任何关于DE 招聘/工作的问题欢迎和我交流~

回复

使用道具 举报

🔗
 楼主| ychen134 2020-9-14 10:10:58 来自APP | 只看该作者
全局:
nn960208 发表于 2020-09-13 16:20:48
本人在某家小独角兽做DE~根据我的日常工作和组里招人要求给大家点小建议~
1. 掌握Airflow/Spark 这类工具! 在我们这是必要的。
2. 多了解一些AWS/ Google Cloud Pl
谢谢你的分享,想请教你几个问题:
1. 我现在的工作接触过ETL/ELT和database design,但是仅限于用SQL和传统的RDBMS实现,现在想要通过学习和side project多接触一些别的platform来丰富自己的简历,但还是比较迷茫,market上的tool太多了,边工作边跳槽又想快点上岸感觉没那么多时间了解所有的platform,我可能只能选某一个深入了解,请问您对比有什么建议?
2. 和别的DE朋友聊过天,他们建议还是要刷题才能应付面试,我自己没有cs背景,以前也没有刷过题,请问您的看法和建议?
回复

使用道具 举报

全局:
ychen134 发表于 2020-09-13 19:10:58
谢谢你的分享,想请教你几个问题:
1. 我现在的工作接触过ETL/ELT和database design,但是仅限于用SQL和传统的RDBMS实现,现在想要通过学习和side project多接触一些
1. 建议你列一下你的Dream company 的requirement。 通常招聘信息上都会明确标出technical skills! DE这个岗位每个公司的要求都不太一样。有的偏向ETL, 有的偏向data modeling, 还有的需要 Architecture。 个人感觉AWS 比较热门。
2. SQL肯定要刷一些题的,但是个人感觉对于database/ETL的理解不是刷题能刷出来的。
回复

使用道具 举报

🔗
tifldn 2020-9-15 09:20:04 | 只看该作者
全局:
刷题的话,目前Amazon的要求是SQL+一种Scripting Language
回复

使用道具 举报

🔗
 楼主| ychen134 2020-9-15 11:40:35 来自APP | 只看该作者
全局:
09/14 投简历,看DE cookbook
回复

使用道具 举报

🔗
 楼主| ychen134 2020-9-16 11:40:25 来自APP | 只看该作者
全局:
09/15 突然收到亚麻二轮面试的通知,和LP对线去了
回复

使用道具 举报

🔗
tifldn 2020-9-18 03:50:19 | 只看该作者
全局:
ychen134 发表于 2020-9-16 11:40
09/15 突然收到亚麻二轮面试的通知,和LP对线去了

加油加油
回复

使用道具 举报

🔗
Syan722 2020-10-2 09:26:09 | 只看该作者
全局:
ychen134 发表于 2020-9-16 11:40
09/15 突然收到亚麻二轮面试的通知,和LP对线去了

厉害厉害,有update吗
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 注册账号
隐私提醒:
  • ☑ 禁止发布广告,拉群,贴个人联系方式:找人请去🔗同学同事飞友,拉群请去🔗拉群结伴,广告请去🔗跳蚤市场,和 🔗租房广告|找室友
  • ☑ 论坛内容在发帖 30 分钟内可以编辑,过后则不能删帖。为防止被骚扰甚至人肉,不要公开留微信等联系方式,如有需求请以论坛私信方式发送。
  • ☑ 干货版块可免费使用 🔗超级匿名:面经(美国面经、中国面经、数科面经、PM面经),抖包袱(美国、中国)和录取汇报、定位选校版
  • ☑ 查阅全站 🔗各种匿名方法

本版积分规则

>
快速回复 返回顶部 返回列表