查看: 1584| 回复: 4
跳转到指定楼层
上一主题 下一主题
收起左侧

[自我提升] BI 转 Data Engineer 该不该申请?

全局:

注册一亩三分地论坛,查看更多干货!

您需要 登录 才可以下载或查看附件。没有帐号?注册账号

x
本帖最后由 Dracaena 于 2022-11-19 13:41 编辑

我一直做BI,现在公司其他部门招 data engineer,要求 SQL,python,这些我都没问题,以前在其他公司也有参与过一部分ETL,都是data warehouse环境,用 ETL工具,做的不是太多,也有兴趣转DE。

公司内部网上找了一个人了解了一下,有两个部门在招,其中一个就是他们部门的,纯用SQL,任务是把新客户的 database 转成我们的 database,但是没什么文档,客户也不一定了解他们数据的来源,应该技术上要求不高,但是了解 business domain 方面的难度比较大。另外一个都是公司自己的database,用SQL,python,可能稍微规范一些。. 1point 3acres
. Waral dи,
感觉上这两个应该都可以试一试,不过第一个好像技术环境不咋地,第二个算稍微好一些。尽管同一个公司再换一个很大概率也可能是粪坑,但总比自己一个人孤军奋战好一些,另外从职业发展角度可能 DE 比 BIE 会好一点。只是单就这个公司而言这个职位的稳定性不好说。不知道有没有做这一行的能够指导一下?

另外补充一下工作背景,现在的BI 工作做得很熟,这个部门原来还有两三个被公司逼着转行做 BI 的,但是这几个人水平很差,也不喜欢做BI,都跑光了,只剩我一个,留下来一大堆历史遗留问题,需要很长时间清理,不可能有裁员风险。坏处是管理极其混乱,管理层还特别喜欢每天开会,尤其因为这一摊现在只有我一个,而且有些问题客户催的比较紧,现在是每天几个manager,director给我单独开会查进度,这些人完全不懂技术、也不清楚业务需求还要瞎指挥,经常指歪了还要返工,或者一次几个任务逼着赶紧做,赶出来以后又说这些不急,另外一个更急,有时候还要几个小时以后再开一次会汇报进度,极其恶心,感觉就是被一群大灰狼围剿的小白兔,再加上前面那些人留下来的工作也是一堆屎,现在因为公司逼得紧也只能继续以前 quick and dirty的方式,我想优化也有心无力,每天都在吐血和崩溃辞职的边缘挣扎。

当前这年景不敢裸辞,一直想跳槽,但是不知道怎么回事,今年简历发出去几乎没回应。每天各种印度中介的邮件、message、connect invite一大堆,但是感觉印度人不靠谱,都没回。

新的DE职位基本上是新客户进来的时候需要招人,没有新客户的时候就不需要那么多人,所以可能不太稳定。问的那个人说他在的组没有裁过人,前两年工作少的时候有人走了就不再招了,现在有新业务就需要招人。两个部门都是有专门的data engineer组,可能管理上不至于像现在这个这么让人吐血。

上一篇:一直想问,为什么twitter这么不好用?
下一篇:buyside quant 转 fund quant devs 能躺平吗?
🔗
 楼主| Dracaena 2022-11-20 03:26:44 | 只看该作者
全局:
本帖最后由 Dracaena 于 2022-11-19 14:28 编辑

也没人回复,发张图看有没有回应,超市买的枸杞叶,叶子撸了做汤,剩下的光杆剪了插了两盆,放在外面没管居然也长势良好,天冷了就搬进屋里了。也不知道能不能过冬

本帖子中包含更多资源

您需要 登录 才可以下载或查看附件。没有帐号?注册账号

x

评分

参与人数 1大米 +1 收起 理由
gexiyuanku + 1 赞一个

查看全部评分

回复

使用道具 举报

全局:
做了几年的DE,个人觉得应该转,DE是tech加强版的BI,需要懂pipeline和data model,如果一个已经做过BI的人其实更懂如何做一个更好的DE,因为BI是DE的其中一个下游,你会更懂设计什么样的database,data model和pipeline才是更好的。而且很多公司的DE也做dashboard,所以现在的DE更需要build end to end data foundation。

如果有一天觉得自己不喜欢做DE的话,转回BI是很容易的。
回复

使用道具 举报

🔗
 楼主| Dracaena 2022-11-20 09:27:28 | 只看该作者
全局:
谢谢你的建议。实际上以前独立做过新建 data warehouse 的 data mapping, 后面BI model 和所有 core reports也是我一手从零开始建起来的,也查过很多ETL job,只不过没机会上手开发,而且我对data warehouse的 ETL比较熟悉,这个其实不是建datawarehouse,而是不同的relational database之间的data conversion,不过原理应该也差不多,只不过database结构不一样。另外以前主要是接触ETL工具,这个是纯粹用SQL,应该各方面都没有用工具那么方便,不过倒是有利于打基础。
回复

使用道具 举报

🔗
alcest 2022-12-1 05:45:59 来自APP | 只看该作者
全局:
楼主想私聊嘛 也是BI想转DE 1073799804
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 注册账号
职场达人
  • ↑ 本版用于讨论职场各种干货话题,闲聊请去🔗聊聊或者🔗匿名版
  • ❌ 本版严禁水贴,引战,发布广告,拉群,贴个人联系方式,扣分无警告
  • ☑ 求职、面经等去 🔗北美求职和 🔗回国求职大区,刷题和学习请去 🔗终身学习大区
  • ☑ 请去专版发布 🔗内推, 🔗招聘信息,和讨论 🔗创业内容
  • ☑ PIP / DevList/ Need Support 等话题也已开设 🔗专版

本版积分规则

>
快速回复 返回顶部 返回列表