Meta推出先进大型语言模型 欲背刺ChatGPT

Integer23 发表于 2023-2-26 02:57
最搞笑的是YannLecun这厮，前几天还在骂LLM是making shit up，这么大的人物既然在领英上说这种话，然后马上 ...

这不就是在证明chatGPT没有太多技术创新，FG也能做出来吗？

匿名用户 发表于 2023-02-25 18:57:17
光一个模型有啥用？
微软都已经产品落地了。
最近发现用new bing读论文真太太太方便了。可以直接选中内容，让他总结，解释，搜索相关等等。

这个产品不就是well trained model加个接口？

Integer23 发表于 2023-2-25 10:57
最搞笑的是YannLecun这厮，前几天还在骂LLM是making shit up，这么大的人物既然在领英上说这种话，然后马上 ...

嘴脸 嘴脸 ...

匿名用户 发表于 2023-02-25 20:38:13
这个产品不就是well trained model加个接口？

但meta这个离所谓加个接口就能产品化的model还差了很远呢。

匿名用户 发表于 2023-2-25 17:35
这个倒是。其实我之前做实验的时候测试T5就已经有few-shot in-context learning的能力了，但是当时做T5的 ...

能scale肯定scale啊，也不是deployment问题，工程问题肯定能搞定，主要是data用完了没办法scale了

匿名用户 发表于 2023-2-25 21:05
但meta这个离所谓加个接口就能产品化的model还差了很远呢。

你为啥会觉得差得远。。。

meta这个根本没align呢。。。还早

匿名用户 发表于 2023-02-25 23:00:35
你为啥会觉得差得远。。。

没有safety mitigation，没有alignment，没有针对inference的优化。对于产品化来说这些远比benchmark的几个百分点重要。opt，bloom这些开源模型benchmark也不差，但根本没人用他们做产品。

匿名用户 发表于 2023-2-25 23:40
没有safety mitigation，没有alignment，没有针对inference的优化。对于产品化来说这些远比benchmark的几 ...

opt benchmark很差的。。。
. Waral dи,
补充内容 (2023-02-26 15:58 +8:00):
-baidu 1point3acresOPT比起GPT 3的benchmark performance可差远了。。。单纯比few-shot benchmark FLAN-T5都不知道能不能打过。这个新model如果真的和他report的结果一样好，好好finetune一下还是挺能打的。

匿名用户 发表于 2023-02-25 20:38:13
这个产品不就是well trained model加个接口？

既没有技术工程经验也没有商业产品经验，才能说的出这样的话。。