由NeurIPS 2023道德审查联合主席撰写
NeurIPS 2023道德审查过程始于道德规范的出版这一步骤正式编纂了会议框架内的道德基础。
这个审核人员道德准则也进行了更新,以反映道德规范.
今年,502篇论文(占所有提交论文的3.77%)被标记为道德审查。这表明去年标记的论文数量有所增加(474篇),但标记论文的总体比率有所下降(2022年为4.37%)。
特别是,我们感到欣慰的是,尽管提交数量自去年以来增加了一倍多,但数据集和基准轨道中被标记为道德审查的提交数量更少。我们认为,这些趋势意味着ML研究的伦理正被研究界更加重视。
| 2023 | | | 2022 | | |
纸张统计(初步) | 主轨道 | D&B轨道 | 总计 | 正线 | D&B轨道 | 总计 |
提交的文件 | 12,345 | 976 | 13,321 | 10,411 | 447 | 10,858 |
标记为道德审查的论文总数 | 395 | 107 | 502 | 362 | 112 | 474 |
标志率 | 3.20% | 10.96% | 3.77% | 3.48% | 25.06% | 4.37% |
今年,主道评审员被要求至少标记一个特定的道德审查领域。请注意,论文可以标记为多个区域,因此下面的百分比加起来并不等于100%。
值得注意的是,今年对歧视、偏见和公平问题的关注程度几乎是去年的三倍;被标记为合法合规或负责任的研究实践的论文数量也翻了一番。
按区域标记的纸张(仅主轨道) | 2023 | | 2022 | |
歧视/偏见/公平问题 | 122 | 33.7% | 47 | 13.0% |
隐私和安全 | 91 | 25.1% | 63 | 17.4% |
法律合规性 | 39 | 10.8% | 17 | 4.7% |
数据和算法评估不足 | 83 | 22.9% | 35 | 9.7% |
负责任的研究实践 | 61 | 16.9% | 30 | 8.3% |
不适当的潜在应用和影响 | 76 | 21.0% | 47 | 13.0% |
研究诚信问题 | 63 | 17.4% | 56 | 15.5% |
未能遵守NeurIPS道德规范 | 53 | 14.6% | 2023年新增 |
我不知道 | 已弃用 | 38 | 10.5% |
未标记区域 | 已弃用 | 80 | 22.1% |
总计 | 395 | | 362 | |
今年,我们邀请了去年接触过道德审查的所有人再次担任道德审查员,并发布了一份公开邀请新审稿人共有396名道德审查员接听了电话。
此外,我们还询问了评审员是否作为紧急道德审查员,为短时间内标记为审核的论文提供缺失的评论和评论。76人自愿担任紧急伦理审查员。
我们非常感谢每一位响应服务号召的人,这使我们能够处理道德审查工作量增加的问题,同时扩大社区范围,减少每个审查员的平均审查次数。
感谢大家出色而成功的道德审查过程。
您的真心,
陈嘉豪、莱斯特·麦基和切丽波兰
NeurIPS 2023道德审查联合主席