gpt时代各位ds的scope有受影响吗

AlphaOne 发表于 2023-4-4 03:13
如果纯从技术角度来看，你要问问你们ds能做engineering的工作吗，搭pipline,写production level的code. 处 ...

但是很多 engineer 也做不了 ds 的事情，数学以及 data sensitivity 不行。

tomchen29 发表于 2023-04-03 23:58:58
非杠，不过楼主提到“这个过程很多步骤都要用到data modeling尤其是让api对接我们内部的data”, 这听起来可能是Engineers擅长的?

补充一下发这个帖子没有要跟engineer争高下或者说谁比谁更擅长什么的意思。平心而论大家就是各司其职，我们大组有搞模型的也有MLE，一直end to end独立负责公司所谓的”AI features”.  有的产品组赶时间也会去买第三方现成的ML API自己弄，以前那些api效果其实都不怎么样，所以我们不缺项目。3.5出来以后不太一样了：
1. 它效果好迭代很快，解决很多low hanging fruit. Gpt4强大更多，我们暂时没用是因为很贵，但是随着模型迭代早晚价格会降下来。
2. 3/3.5 performance在有的任务上没有proprietary model 好但是deployment非常快速简单，为了跟竞争对手第一时间抢占热点和资源，高层的决策是宁愿先上一个效果差一点点但可以10x速度ship的。

另外我没有说是我们写不了production code或者搞砸只能engineer team来救场, 反而是我们弄的很好太出圈，越来越多的product leader带着自己的engineering团队来参一脚，我们一直主动share knowledge和proof of concept让他们可以自己开始弄，直到有一天突然被通知跟GPT有关的项目不属于我们ownership范畴了。

发这个帖子只是想抛砖引玉看看其他同行有没有类似的经历，以及ds以后何去何从，会不会取代我不知道，但是scope变小是真实发生了，当然这也跟公司strategy有关，不管大家怎么觉得chatgpt回答问题胡说八道，或者写的代码都是bug, 但是它在产品层面确实打开了很多可能性，基于它的垂直应用会爆炸性地增长，ds如何在这个新的dynamics找到自己的竞争优势我觉得需要想一想

连Grammarly都快被搞死了。这些也算不上很奇怪啊。本来就是谁做都可以，谁做的更好就是谁的。

更觉得像是在内部竞争，你们组被摘桃子了。
你可以换个角度想，就算没有chatgpt，公司内部好的项目也都是大家抢的，你们没有抢过其他组的 scope 吗？
如果被摘，感觉责任更大的是你们 manager， 而不是 chatgpt。呼唤版上 manager 大牛出来说两句～

我觉得会不会brain storming ds idea是你们的responsibility但是implement 这些idea并不需要你们。上面想让你们一直提供idea而不是花时间去implement？

单独开了个thread有兴趣的同学可以看看: https://www.1point3acres.com/bbs/thread-984884-1-1.html
deepmind最近和googl的组整合了做llm，虽说这年头人多未必力量大但站巨人肩膀也没什么不好 ;-)

super-dexter 发表于 2023-4-4 19:39
我觉得会不会brain storming ds idea是你们的responsibility但是implement 这些idea并不需要你们。上面想让 ...

同意，implement是coder的活，coder是human还是machine都可能，能按部就班出活就ok，但scientist还是需要大胆一些，那些行走在人类思维极限边缘的科学家就像冒险家一样酷

匿名用户 发表于 2023-4-4 03:57
但是很多 engineer 也做不了 ds 的事情，数学以及 data sensitivity 不行。

那得是phd ds/as/rs了吧，市面上感觉80%的ds其实本质上就是da/bi eng（起码我司是）

我们组就是纯NLP组。GPT3.5出来后，我们的scope反而更大了，项目更多了。 主要因为我们组的产品有了新的应用场景也就是Chat，并且GPT本身让我们以前很多很难做的事变得可以做了，很多新的想法以前很难实现，现在可以实现了。