字节跳动大数据开发一面

字节跳动big data engineer一轮面经

网上海投的，很快就收到恢复，大概两天左右吧，base在北京

先过了简历，刚好有一个project是spark相关的，问了
- spark dataframe和spark rdd的区别
- spark的算子有哪些你比较常用
- groupbykey和reducebykey在操作上的区别

小哥哥人还挺好的，有些回答的没有很到位的地方有一起讨论

算法问的是一个array里面出现最多次数的数字组成的最长sub array的长度，需要考虑有出现相同次数的情况。还问了spark sql的groupby和join，还有string和schema的一些操作。总体来讲感觉还不错啦，求米呀

谢谢lz分析～请问lz是面的哪个组的哇

Yujin_amanda 发表于 2020-7-11 13:22
谢谢lz分析～请问lz是面的哪个组的哇

是字节开发提前批，具体哪个组我也不知道啦

多谢楼主！ 楼主能不能说一下spark的算子指的是什么呢？

JNS 发表于 2020-7-29 01:16
多谢楼主！ 楼主能不能说一下spark的算子指的是什么呢？

就是operator，reduce by key, group by key这种，我当时也蒙了一下