📣 黑五价提前开抢|VIP一年通行证5折,蓝莓、Offer多多同步特惠
查看: 15031| 回复: 37
跳转到指定楼层
上一主题 下一主题
收起左侧

[职场感言] Llama4真实排名出炉,低于llama3

   
🔗
匿名用户-SHWCQ  | 添加认证 | 2025-4-12 09:54:06 来自APP |倒序浏览
😨 16
💯 12
自从llama4的特供版被骂上热搜之后,lmsys火速撤掉了特供然后重新evaluate。今天结果出来了(如图),排名只有32,甚至不如llama3的排名17。这个和community对于它的体感基本符合,就是一个字,拉。虽然大家都有心理预期,但还不如llama3还是令人跌破眼镜。

meta真是把全世界的科学家当猴子耍。我个人不相信是真的硬作弊(把测试集加到训练里)因为太低级了。但软作弊一定特别严重(在训练的时候花式data augmentation搞了很多和测试特别像的数据刷榜)。历史一次又一次的证明,聪明只是让人短期内走得快,正直才是让一个人走的更远。llama4的翻车对这个领域是个好事,让大家真正的看到了在这个浮躁的时代,职业操守的价值。

本帖子中包含更多资源

您需要 登录 才可以下载或查看附件。没有帐号?注册账号

x

上一篇:果家面试睡过了,会被拉黑么
下一篇:卖力NG PERM情况
地里匿名用户
推荐
匿名用户-VJCNF  | 添加认证 | 2025-4-12 10:36:28 来自APP
😂 76
🤩 2
👌 4
🍗 26
🍉 15
楼主你凭什么说软作弊特别严重?
请拿出证据
我亲自参与了llama4开发的某个部分. 1point3acres
我敢拍胸脯保证没有任何取巧行为.1point3acres
实名:【firsr name, last name】
(晚上一起发,务必署名)

评分

参与人数 3大米 +3 收起 理由
Dithyrambus + 1 笑鼠
小丸几 + 1 甜菜
Chasedream.df + 1 赞一个

查看全部评分

回复

使用道具 举报

地里匿名用户
推荐
匿名用户-CXHCH  | 添加认证 | 2025-4-12 10:31:04 来自APP
匿名用户 发表于 2025-04-11 19:18:08
一堆只认大包的人在一起能做出啥好东西
Meta的psc culture只能做出来快糙猛的东西,稍微需要点技术含量就肯定会落后。文化或者小渣决定的,还真不是人的问题。

评分

参与人数 1大米 +1 收起 理由
爱丽丝和鲍勃 + 1 赞一个

查看全部评分

回复

使用道具 举报

地里匿名用户
推荐
匿名用户-SSXPU  | 添加认证 | 2025-4-12 21:36:32
🎯 3
这不是讨论无数次了么? meta 鱿鱼文化盛行。 每个人为了自保, 从下到上都会为了不被开掉对于一些很明显的作弊视而不见, 做MLE都懂 本身这个玩意就是有trick 的。 下面的做了是为了performance metrics 好看, 上一层要么是怕揭穿了, 意味着业绩没了, 要么一帮屁都不懂的烙印领导。 多米诺骨牌, 传导到最后,就是这个样子。 小札可以继续惩罚下面的人。 但只要这个鱿鱼文化继续, 不让人踏踏实实做事情, 这种事情以后就是常态,想想东大很多企业为啥几十年如一日的抄袭, 不就是这个道理么。 要么小札有种就把整个班子从上到下全部开除重新招, 那又是不可能的, 光是鱿鱼游戏开除小兵屁都没用

评分

参与人数 1大米 +1 收起 理由
非著名农民 + 1 赞一个

查看全部评分

回复

使用道具 举报

地里匿名用户
🔗
匿名用户-HYVSE  | 添加认证 | 2025-4-12 10:08:54 来自APP
😨 1
https://lmarena.ai/?leaderboard

为了刷数据脸都不要了,还这么拉,大包养的就这逼玩意儿
回复

使用道具 举报

地里匿名用户
🔗
匿名用户-T20PE  | 添加认证 | 2025-4-12 10:18:08 来自APP
匿名用户 发表于 2025-04-11 19:08:54
为了刷数据脸都不要了,还这么拉,大包养的就这逼玩意儿
一堆只认大包的人在一起能做出啥好东西

评分

参与人数 2大米 +2 收起 理由
aaran + 1 赞一个
xdtyt1zx + 1 赞一个

查看全部评分

回复

使用道具 举报

地里匿名用户
🔗
匿名用户-HYVSE  | 添加认证 | 2025-4-12 10:23:12 来自APP
😂 1
匿名用户 发表于 2025-04-11 19:18:08
一堆只认大包的人在一起能做出啥好东西
你咋知道人家只认大包?你也可以去啊
回复

使用道具 举报

全局:
都别骂metamate了 有没有一种可能 大家也不满日益缩减的benefit和越来越多的laid off 故意导演了这场shitshow
回复

使用道具 举报

地里匿名用户
🔗
匿名用户-SHWCQ  | 添加认证 | 2025-4-12 11:11:42 来自APP
匿名用户 发表于 2025-04-11 19:36:28
楼主你凭什么说软作弊特别严重?
请拿出证据
我亲自参与了llama4开发的某个部分
哈哈哈今日最佳!
回复

使用道具 举报

地里匿名用户
🔗
匿名用户-BQMLZ  | 添加认证 | 2025-4-12 11:21:23 来自APP
匿名用户 发表于 2025-04-11 19:18:08
一堆只认大包的人在一起能做出啥好东西
有多少人工作不是为了大包啊,不是Meta的,也没必要这么说别人。只能说有毒的环境才会造就这种急功近利的东西
回复

使用道具 举报

地里匿名用户
🔗
匿名用户-ETEFK  | 添加认证 | 2025-4-12 11:27:37
本帖最后由 匿名 于 2025-4-11 20:35 编辑

真的太拉了
llama 4 400B 参数 竟然打不过 llama 3 49B参数的模型
小扎让genai花了几十个B美金, 最后模型水平还倒退了
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 注册账号
职场达人
  • ↑ 本版用于讨论职场各种干货话题,闲聊请去🔗聊聊或者🔗匿名版
  • ❌ 本版严禁水贴,引战,发布广告,拉群,贴个人联系方式,扣分无警告
  • ☑ 求职、面经等去 🔗北美求职和 🔗回国求职大区,刷题和学习请去 🔗终身学习大区
  • ☑ 请去专版发布 🔗内推, 🔗招聘信息,和讨论 🔗创业内容
  • ☑ PIP / DevList/ Need Support 等话题也已开设 🔗专版

本版积分规则

>
快速回复 返回顶部 返回列表