大家对Databricks的前景怎么看？

mine_that_bird 发表于 2020/05/02 15:35:06

首先看到你的亚麻抖包袱贴里面提到databricks，所以在那里简短的回复了一下我的看法。后来看到这个贴，就再说两句...

话说如何衡量ml platform呢？感觉了databricks ml platform做得好因为和spark运算做的衔接不错？求指点

去databricks吧，难道amazon股票还会翻倍么？

kingxueyuf 发表于 2020-5-11 13:15
从使用者的角度说吧，目前我们公司的ML data pipeline是kafka+flink+s3，数据最终以parquet的格式写入s3 si ...

我觉得这个不能怪spark吧。spark只是读数据，具体是列式还是行式得看底层数据是什么格式。可以考虑试下存成avro，比较一下效率。或者parquet加blob。

wangchengxuan 发表于 2020-6-18 15:59
我觉得这个不能怪spark吧。spark只是读数据，具体是列式还是行式得看底层数据是什么格式。可以考虑试下存 ...

我个人认为基于行的读取是比较多的业务都会需要的...spark在这方面不是很擅长，可能我们在选技术方案的时候考虑错的方向，导致业务中忽视了sparkd的优点同时放大了它的缺点；overall我觉得spark肯定是很好的，而且创始人还是华人，是华人在底层技术上作出的一个重大突破了

kingxueyuf 发表于 2020-6-19 02:56
我个人认为基于行的读取是比较多的业务都会需要的...spark在这方面不是很擅长，可能我们在选技术方案的时 ...

嗯嗯。同意同意。

关注一下这个帖子

请问LZ最后去了哪个公司？如果去了databricks能不能分享一下见闻呢？

yturieowpq1 发表于 2020-5-26 06:07
去databricks吧，难道amazon股票还会翻倍么？

现在回头看，亚麻股票确实可能很快就比去年夏天翻倍。。。

请教楼主，最终选择哪里，感想如何？

moonpig 发表于 2021-1-27 12:10
现在回头看，亚麻股票确实可能很快就比去年夏天翻倍。。。

然而databricks已经翻了快五倍了