MLE需要掌握怎样水平的scala

LZ再过两周就要入职新东家做MLE（现在是做模型的DS，每天接触最多的是python和pytorch），之前跟新组里的人catch-up的时候了解到大家一般都在用的tech stack里有scala和spark（我assume是scala spark不是pyspark），还有Java啥的which LZ很有经验。
LZ对于scala现在处于两眼一抹黑的情况，所以去稍微学了一下scala，学得那叫一个难受。syntax倒不是特别奇怪，但函数式编程的这种思考方式感觉有一个learning curve。
. 1point3acres
所以想问问各位MLE，你们在工作中用到scala大概需要掌握到怎样的水平？是只要能用scala让spark跑起来就行了对吗？还是需要用scala写production level的东西出来？新工作的MLE主要偏向建模和构造feature，metric是一些top-line的business metric，而并不特别偏向于infra。

问题可能有点vague，望包涵。。
. From 1point 3acres bbs

Scala 雖然可以建模，但我不確定能否用來做複雜的ML模型耶！我的經驗是用Scala build data pipeline 然後轉到python環境下使用TF建模，但簡單的模型似乎可以。這是我的經驗，可能其他組要求的不一樣吧！

litha 发表于 2021-9-16 23:55
Scala 雖然可以建模，但我不確定能否用來做複雜的ML模型耶！我的經驗是用Scala build data pipeline 然後轉 ...

谢谢！

跟我想得差不多，scala最后还是帮助运输数据，然后由别的部分来建模