要求人工制品
与往年一样,我们鼓励作者提交论文中提出的任何工件和评估。提交人工制品的目的是加强我们领域对评估和结果再现性的科学方法。提交的人工制品还可以作为未来研究的垫脚石,使研究人员能够快速利用现有工具,更好地评估或对比现有工作。
你准备工件的时候迟到了吗?别担心!截止日期延长至25日!
- 人工制品通知:2022年7月15日AoE(连同纸质通知)
与去年一样,今年每件文物最多可获得三枚徽章:
能够合理再现论文中实验主张的人工制品。这是对提交工件的最低期望。
允许轻松添加新功能的工件。要获得可扩展徽章的资格,工件必须与源代码捆绑在一起,并通过验证徽章的要求。审查人员可能会尝试调整源代码并重新编译,以评估在该工具上构建的容易程度。请注意,工件提交是可选的。提交工件的源代码也是可选的。但是,没有源代码的工件只能获得Validated徽章。
如果作者将提交的工件版本上传到Zenodo SAS 2022公司公共存储库。如果您的工件在工件评估期间收到验证徽章,您可以通过发布工件将您的工件添加到Zenodo SAS 2022社区在这里。Zenodo提交文件的标题和作者集必须与SAS提交文件相匹配。您需要添加的文件是您的工件(虚拟机或容器映像)和分步说明。在您发布工件后,如果提交结果合格,我们将接受它,并授予您可用徽章。
作者可以将其工件打包为虚拟机映像或Docker容器映像,并提供加载/运行工件的分步说明。
- 虚拟机映像:VM映像必须是可引导的,并且包含安装的所有必要库。请确保可以使用VirtualBox处理VM映像。在准备工件时,请使其尽可能轻。考虑安装
ssh标准
在虚拟机中使其即使在虚拟屏幕不工作时也可以访问(更改主机硬件时的常见问题)。
- 容器图像:作者可以提供包含实验以及所有依赖项的容器图像的压缩版本。请确保可以使用docker load命令加载压缩的容器图像。只有当您的实验可以从命令行执行和验证时,请选择容器图像。
- 分步说明:这应该清楚地解释如何重现支持论文结论的结果。我们鼓励作者加入易于运行的脚本。请注意,与您的设置相比,审阅者可能会在较弱的硬件上评估您的工件,因此请尝试参数化您的脚本,以允许运行较小版本的实验。此外,您应该解释如何解释工件的输出。如果可能,请提供实验执行时间的估计值。最后,如果您正在提供源代码,请尝试提供代码结构的大纲。
请按照以下说明提交您的工件:
- 使用zip或gzip将VM/容器映像和说明文档打包到单个压缩存档文件中。使用您的纸张编号作为存档文件的名称。
- 将存档文件上传到Dropbox或Google Drive等知名存储服务,并获取其可共享链接。
- 对存档文件运行校验和功能。创建一个文本文件,其中包含指向存档文件的链接和校验和结果。
- 通过EasyChair上的特定提交页面提交文本文件。
SAS人工制品评估徽章由阿皮塔·比斯瓦斯和苏瓦姆·穆克吉、和可从下载github.