专栏名称: 轻松参会
回复会议名称获取交流群二维码，如“cvpr”
目录
相关文章推荐
FM1007福建交通广播  ·  宇树科技携两款机器人亮相2025GDC ·  昨天  
FM1007福建交通广播  ·  宇树科技携两款机器人亮相2025GDC ·  昨天  
创业家  ·  700亿身价浙江大佬，疯狂帮马斯克“造人” ·  昨天  
数据何规  ·  上海AIGC备案公告，华师大EduChat通 ... ·  2 天前  
数据何规  ·  上海AIGC备案公告，华师大EduChat通 ... ·  2 天前  
上海科创汇  ·  《嘉定区促进现代服务业发展若干意见》2024 ... ·  2 天前  
每天学点HR  ·  刚刚！马斯克，重大宣布！ ·  3 天前  
每天学点HR  ·  刚刚！马斯克，重大宣布！ ·  3 天前  
51好读  ›  专栏  ›  轻松参会

NeurIPS'24评审遭全网吐槽, 惊动LeCun! 评审员严重贬低论文贡献

轻松参会  · 公众号  · 科技创业 科技自媒体  · 2024-08-10 19:36

主要观点总结

本文报道了NeurIPS 2024论文评审结果引发争议的情况。网友们对评审过程提出质疑，指出一些评审人可能存在不合理评判、忽视论文实际贡献等行为。同时，有爆料称大模型也被用于论文评审，引发进一步讨论。文章还提及了NeurIPS顶会的一些其他信息，如评审员的构成和评分规则。

关键观点总结

关键观点1: NeurIPS 2024评审结果引发争议。

一些评审人被认为存在不合理评判、忽视论文实际贡献等行为，引发网友质疑和讨论。

关键观点2: 大模型也被用于论文评审。

有网友爆料称在NeurIPS 2024的评审中使用了大模型，至少有三篇评审意见明显是由ChatGPT等生成，引发进一步讨论。

关键观点3: NeurIPS顶会评审员的构成和评分规则。

NeurIPS顶会的评审员构成多样，包括正教授、副教授、助理教授、业界专业人士等。评分规则中，6分的含义被指出可能存在误解，引发讨论。


正文

点击以下链接进NeurIPS'24投稿交流群：


本文转载自新智元公众号


新智元报道

编辑：桃子
【新智元导读】 NeurIPS 2024评审结果一出，成了全网吐槽重灾区。

每年AI领域的国际顶会，少不了「大事」发生。
前段时间，NeurIPS 2024论文评审结果终于出炉了，网友们开始「拉群」吵成了一片。
这时，有网友爆出黑料：
「一些评审人严重贬低论文贡献，用不合理的标准评判，甚至忽视论文相对于其他工作的实际改进」。
他认为，这可能是竞品的作者，发现后做出不诚实的评审。
就连LeCun大佬也来围观，立即转发了该帖。
作为领域主席，我告诉作者：如果你遇到了这种情况，请联系领域主席（AC）。

作为一个作者，我想问：如何恰当地指出这种行为，并在合法批评和过度把关之间找到平衡点？
另有网友放出NeurIPS评审员经典评论：这个解决方案不是新的，并且已经被大量研究过了。
今年，是NeurIPS第38届年会，将于12月9日-15日在温哥华召开。
根据Paper Copilot收集的数据统计，截至目前，得分平均分布均在3-6分之间居多。
论文被打低分，究竟是谁的问题？

NeurIPS论文低分一片？


一位来自UT Austin的副教授，也是NeurIPS这届顶会的领域主席（AC）之一，阐述了自己所看到的现象。
他表示，在自己负责的一批论文中，已提交了48篇中的16篇评审。
到目前为止，我还没有看到一个正面评价，要么是评审员变得非常严格，要么是论文质量下降了？
今年，NeurIPS收到了很多「回收利用」的论文。
另一位AI研究员同样表示，要么就是论文质量下降，要么我就是大家口中讨厌的2号评审员。
在他审阅的论文中，基本上都给了2-4分。
另有评审员表示，「在我负责的这批62篇论文中，平均评分是4.3分，标准差为1。所以如果你最初得到低分，也不要灰心」！
可见，这次NeurIPS顶会论文作者都挺不好受，想要获取高分并不容易。

大模型参与评审


而且AI火了之后，大模型也被用来论文评审。
这次，NeurIPS 2024也不例外。
Reddit网友评论道，自己用一个月的时间审核6篇论文，当看到自己得到的是LLM的评价，真的很受伤。
还有人指出，在自己审阅的论文中，至少发现了3篇由大模型生成的评审意见，很可能还有更多，其中3篇明显是直接复制粘贴了ChatGPT输出，完全没有阅读论文。
这些评审都给了6分，Confidence为4，与其他所有人的评价完全不一致。
更有网友评价道，「论文评论的质量很低」。
一个评审者混淆了我们方法的基线，另一个评审者混淆了基线的派生（正如我们的工作所批评的那样）和我们方法的派生。我怀疑一些评论是由LLM产生的。

这届评审怎么肥事？


有人指出这本是NeurIPS官方组委会的问题。
对于NeurIPS的评审，6分的描述完全、彻底、奇怪地错误。






请到「今天看啥」查看全文


推荐文章
FM1007福建交通广播  ·  宇树科技携两款机器人亮相2025GDC
昨天
FM1007福建交通广播  ·  宇树科技携两款机器人亮相2025GDC
昨天
创业家  ·  700亿身价浙江大佬，疯狂帮马斯克“造人”
昨天
数据何规  ·  上海AIGC备案公告，华师大EduChat通过备案（0222）
2 天前
数据何规  ·  上海AIGC备案公告，华师大EduChat通过备案（0222）
2 天前
上海科创汇  ·  《嘉定区促进现代服务业发展若干意见》2024-2026
2 天前
每天学点HR  ·  刚刚！马斯克，重大宣布！
3 天前
每天学点HR  ·  刚刚！马斯克，重大宣布！
3 天前
摄影图录  ·  三分钟教你在花海中拍出美美哒照片
7 年前
咱是闽南人  ·  一夜之间底层10根柱子被敲断，楼会不会塌？晋江这个小区业主吓坏了...
7 年前
知乎日报  ·  马云的无人超市是很厉害的商业模式，但技术还没跟上
7 年前
财经早餐  ·  老母鸡的忠言（非常精辟）
7 年前
E药研发  ·  药品与包装材料相容性研究相关指导原则解读———试验结果的评估
7 年前
Sov5搜索   ·   小百科   ·   今天看啥   ·   移动版
51好读 - 好文章就要读起来!