双重提交和匿名问题
问题1:我们已经向ICLR2021提交了我们的论文,现在我们还有一个关于arXiv的非匿名版本。ICLR2021将于2021年1月12日通知我们最终结果,即ACL-IJCNLP 2021的匿名期,我们想知道如果我们当时将该文件提交给ACL-IJCNLP 2021是否违反匿名政策。
A1:如果您的论文在ACL-IJCNLP 2021的提交截止日期之前不再在ICLR接受审查(例如,案头拒绝、撤回),并且您的非匿名论文在2021年1月1日之前发布,您可以将您的论文提交给ACL-IJCNLP 2021。1月1日之后的任何取消匿名都将没有资格重新提交给ACL-IJCNLP 2021。
问题2:我们的论文已经被一个研讨会接受了。本次研讨会没有正式的会议记录。我们希望将我们的工作提交给ACL-IJCNLP 2021。我们是否需要采取任何特殊措施来确保其符合ACL-IJCNLP 2021的资格,例如,确保研讨会不会在匿名期间将论文发布到网上?
A2:匿名期的目标是确保双盲审查。因此,研讨会不应在匿名期间将论文发布到网上。你最好联系一下研讨会的组织者。
问题3:2021年1月1日的匿名截止日期是指arXiv提交文件的提交截止日期还是发布截止日期?
A3:对于arXiv提交,2021年1月1日11:59 PM UTC-12h(地球上任何地方)是提交截止日期。与提交相关联的日期戳是完成最终“提交文章”步骤的时间。对于其他非匿名版本,这是该版本公开的截止日期。
问题4:我们在匿名期之前发布了一份arXiv预印本,在匿名期开始后,我们不会对其进行更新/宣传。如果我们不以任何方式宣布这些升级,我们是否可以在匿名期间对相关的web演示和相关的GitHub回购进行升级?
A4:只要您在匿名期间不更新arXiv预印本,您就不会被视为违反匿名政策。也就是说,匿名开始后,您仍然可以更新您的web演示和GitHub repo。
问题5:我们能否根据之前在一次演讲中所报告的工作提交一份论文?
A5:只要您提交作品的演讲或之前的地点没有正式的会议记录,并且没有ISBN/ISSN/DOI或类似文件,您就可以向ACL-IJCNLP 2021提交作品。
问题6:我们能否向ACL-IJCNLP研讨会提交ACL-IJCNLP 2021年主要会议文件?
A6:我们允许向ACL-IJCNLP 2021年主要会议及其研讨会提交双重论文。
问题7:我们能否将ACL-IJCNLP 2021论文提交给非档案研讨会?研讨会将没有正式出版的会议记录,但将提供到已接受论文的链接。
A7:如果您的研讨会论文是在2021年1月1日至2021年5月5日期间在线发表的,则由于ACL-IJCNLP 2021的匿名政策,您不应向其提交。
问题8:在我提交的论文中,我可以在github中包含一个到我的源代码的链接吗?
答8:请不要在您的提交中包含透露作者身份的github链接。如果您觉得包含源代码很重要,可以压缩代码并将其提交给softconf。如果你的论文被接受,你可以把github链接包含在相机就绪的版本中
页数限制
问题1:主题论文的页数限制是多少?
A1:主题论文的提交要求与长论文相同。
问题2:征集论文时说“作者将被允许在第8页(短论文为第4页)之后留出额外的空间,用于更广泛的影响声明或其他伦理讨论。”这是否意味着影响声明将不计入总页数限制?
A2:道德/更广泛的影响声明不计入总页数限制。你需要把影响陈述放在引用之前。因此,不包括影响声明和参考文献的论文不应超过页数限制。
问题3:附录的页数限制是多少?
A3:附录的页数限制为4页。
问题4:附录是否应作为单独的文件提交?
A4:是的。它应该作为一个单独的pdf文件提交。不应将其列入主要文件。
摘要提交
问:为什么会议要求在2021年1月25日之前提交摘要?
A1:ACL-IJCNLP 2021的评审周期比ACL 2020的评审周期短几周,主要是因为与NAACL 2021的协调。为了应对缩短的评审周期,我们要求作者在论文截稿前一周提交一份摘要,以便为评审周期做好准备。
问题2:我需要在2021年1月25日之前提交摘要吗?
A2:是的。如果你不在截止日期前提交摘要,你将无法在2月1日截止日期前提交论文全文。
问题3:在摘要截止日期之后,我是否可以更改作者姓名和主题领域?
A3:不,在1月25日截止日期之后,您将无法更改作者姓名和主题区域,因为我们将使用该信息将提交的内容分配到曲目并运行利益冲突检查。你可以对摘要的标题和散文稍作修改。
影响陈述
问题1:什么样的提交应该包括影响声明?在审查过程中如何使用影响声明?
A1:我们正在起草一份关于影响声明的单独常见问题解答。它将于2021年1月15日左右发布到会议网站上。FAQ将与NAACL2021使用的FAQ类似。
再现性问题
问题1:有再现性检查表吗?
A1:清单在这里,与NAACL2021使用的清单非常相似。该检查表旨在提醒作者提高论文的可重复性,并帮助审稿人对论文进行评估。
问题2:在提交过程中,我需要对清单做些什么?
A2:检查表是提交表格的一部分。我们要求所有提交的文件都为每个项目标记“是”、“否”或“不适用”(我们将为每个项目设置一个强制选择器)。例如,一篇引入新数据集的文章可能不会进行超参数搜索,因此作者可以在超参数搜索项上标记“N/a”。
问题3:我们应该在主要文件或附录的检查表中解决相关问题吗?
A3:作者可以选择解决这些问题的最佳地点。以下是一些建议:
- 第一组中的项目“所有报告的实验结果”应包含在主要论文中。
- 第二组中的项目“所有涉及多个实验的结果,如超参数搜索”可以在附录中,尽管“训练和评估运行的确切次数”可能在主要论文中。
- 第三组“用于所有使用的数据集”中的项目是混合的。第一项和第二项应在主要论文中(为了理解实验结果,我们需要知道例子的数量和数据分割),而其余的项目可以在附录中。
Main Conference paper instructions
摘要提交强制性要求:
论文标题、作者姓名、联系方式和简要摘要必须在摘要提交截止日期前通过ACL-IJCNLP 2021论文提交网站以电子方式提交。在提交完整论文截止日期之前,可以对标题和摘要进行少量编辑,但不能更改作者和主题区域。带有“占位符”摘要的提交将被删除,恕不考虑。请注意,如果您错过了摘要提交截止日期,那么您将无法提交完整的论文
论文提交信息
长文
长篇论文必须描述实质性的、原创的、已完成的和未发表的作品。在适当的情况下,应包括具体的评估和分析。
长论文可能包含多达八(8)页的内容,加上不限页数的参考文献。长论文的最终版本将增加一页内容(最多9页),以便审稿人的评论可以被考虑在内。
长论文将以口头或海报形式提交,具体由项目委员会决定。关于哪些论文将以口头形式呈现,哪些作为海报呈现的决定将基于作品的性质而不是质量。在诉讼程序中,口头提交的长论文和作为海报提交的长论文没有区别。
短文
提交的短文必须描述原创和未发表的作品。请注意,短纸不是缩短的长纸。相反,短文应该有一个观点,可以在几页。有些短文是:
- 一个小的,集中的贡献
- 消极的结果
- 评论文章
- 一个有趣的应用程序
短篇论文最多可包含四(4)页的内容,外加不限页数的参考文献。最终版本的短文将提供一个额外的内容页(最多5页),以便评论员的意见可以考虑在内。
短篇论文将以口头或海报形式呈现,具体由项目委员会决定。虽然短论文和长论文在会议过程中有区别,但在会议过程中,口头提交的短论文和作为海报提交的短论文没有区别。
专题论文
主题论文的提交要求与长论文相同。
重要提示:匿名期
以下规则和准则旨在保护双盲审查的完整性,并确保提交的材料得到公平审查。这些规则提到了匿名期限,从提交截止日期前1个月(2021年1月1日11:59 UTC-12:00)到您的论文被接受、拒绝或撤回之日(2021年5月5日)。在此期间撤回的论文将不再受本规则的约束。
- 在匿名期内,您不得将论文的非匿名版本在线提供给一般社区(例如,通过预印本服务器)。通过一篇论文的一个版本,我们理解了另一篇具有基本相同的科学内容,但可能在次要细节(包括标题和结构)和/或长度上有所不同的论文。
- 如果您在匿名期开始前已将论文的非匿名版本发布到网上,您可以向会议提交一份匿名版本。提交的版本不得引用非匿名版本,您必须通知项目主席存在非匿名版本。
- 在匿名期内,您不得更新非匿名版本,我们要求您不要在社交媒体上做广告,也不要采取其他可能进一步损害匿名期内双盲审查的行动。
- 请注意,虽然不禁止您在匿名期开始前在线提供非匿名版本,但这确实会增加维护双盲审查的难度,因此我们鼓励您尽可能等到匿名期结束。或者,你可以考虑把你的工作提交给《计算语言学杂志》,该杂志不需要匿名,并且有一个“短”(即会议长度)论文的跟踪记录。
双盲评审须知
由于审查将是盲目的,论文不得包括作者的姓名和隶属关系。此外,必须避免自我引用,以揭示作者的身份,例如,“我们以前显示(史密斯,1991年)…”。取而代之的是,使用诸如“Smith Previous showed(Smith,1991)…”之类的引文。不符合这些要求的论文将不经审查而被拒绝。
论文不应参考审稿人无法获得的文件,以了解更多细节。例如,不要省略或编辑重要的引文信息以保持匿名性。取而代之的是,使用第三人称或命名的引用,如上所述(“Smith Show”而不是“we Show”)。
论文可能附带论文中描述的资源(软件和/或数据),但这些资源也应该匿名。
作者
提交的作者名单应包括所有(且仅限于)对所提交的作品作出重大贡献的个人。向ACL-IJCNLP 2021提交的文件中列出的每位作者将收到提交、修订和最终决定的通知。摘要提交截止日期(2011年1月25日)之后,不得对提交给ACL-IJCNLP 2021的作品的顺序或作者构成进行任何更改。
引文与比较
您需要引用所有与您的提交相关的参考出版物,但您可能会因为不知道所有未发表的作品(尤其是最近发布和/或未被广泛引用的作品)而被原谅。
如果预印本已被参考出版物取代,则参考出版物应作为预印本的补充引用或代替预印本。
在提交截止日期前3个月内出现的论文(无论是否经过评审)被视为与您提交的论文同时提交,因此您无需进行需要额外实验和/或深入分析的详细比较。
有关更多信息,请参阅ACL提交、审阅和引用策略。
多次提交策略
ACL-IJCNLP 2021将不考虑在提交时在期刊或其他会议上正在审查的任何论文,并且提交的论文不得在ACL-IJCNLP 2021审查期间提交到其他地方。本政策涵盖所有经评审和存档的会议和研讨会(如IJCAI、SIGIR、NAACL)。唯一的例外是,论文可以同时提交给ACL-IJCNLP 2021年主要会议和ACL-IJCNLP 2021年研讨会。
此外,我们不会考虑任何在内容或结果上与将(或已经)在其他地方发表的论文有重大重叠的论文。向ACL-IJCNLP 2021提交一篇以上论文的作者必须确保提交的论文在内容或结果上不存在明显重叠(>25%)。
伦理政策
作者必须遵守ACL道德规范中规定的道德规范。
考虑到我们的研究、数据的使用和我们工作的潜在应用的伦理影响一直是一个重要的考虑因素,随着人工智能越来越成为主流,这些问题越来越相关。我们要求所有作者阅读代码,并确保他们的工作符合此代码。如果一篇论文可能会提出道德问题,我们要求您在论文中明确讨论这些问题,并在审查过程中予以考虑。我们保留以道德理由拒绝论文的权利,如果作者被认为违反了道德规范,或者在他们的工作中没有充分解决合理的道德问题。事实上,ACL-IJCNLP 2021评审表中包含了一个章节,阐述了这些问题,评审员或ACs标记为伦理问题的论文将由伦理咨询委员会(EAC)进一步评审。
阅读会议通过的道德讨论标准常见问题解答和评审表道德部分的问题。如果这些问题中的任何一个适用于您的工作或您预期其他道德问题,请确保在您的论文中包含一个道德声明,以解决这些问题。在第8页(第4页为短文)之后,作者将被允许留出额外的空间,以便发表更广泛的影响声明或其他伦理讨论。请注意,尽管伦理考虑段落不是强制性的,但处理敏感数据或处理敏感任务的论文的作者如果没有充分讨论这些问题,可能会收到有条件的接受建议。道德委员会将重新审查指定为有条件接受的文件的相机准备版本,以确定这些问题是否得到充分解决。
再现性标准
与NAACL2021类似,我们将提供一份可复制性检查表,在提交论文时,作者将被要求回答。该检查表旨在提醒作者提高论文的可重复性。论文不需要满足所有列出的再现性标准。稍后会有更新版本。我们正在努力。关于再现性标准和检查表的作者说明将很快在https://2021.aclweb.org/blog/。
再现性检查表基于Dodge等人(2019)和Joelle Pineau的再现性检查表的先前版本。
#2021-1-16 更新
对于所有报告的实验结果:
- 对数学设置、算法和/或模型的清晰描述
- 指向可下载源代码的链接,包含所有依赖项的规范,包括外部库(建议用于相机就绪)
- 所用计算基础设施的描述
- 每个模型或算法的平均运行时间,或估计的能源成本
- 每个模型中的参数数
- 每个报告测试结果的相应验证性能
- 用于报告结果的具体评价指标或统计数据的明确定义。
对于涉及多个实验的所有结果,如超参数搜索:
- 培训和评估的确切次数
- 每个超参数的边界
- 最佳模型的超参数配置
- 选择超参数值的方法(例如,手动调谐、均匀采样等)以及在其中选择的标准(例如,精度)
- 结果的汇总统计(例如,平均值、方差、误差线等)
对于所有使用的数据集:
- 相关统计数据,如示例数和标签分布
- 列车/验证/测试拆分的详细信息
- 对排除的任何数据的解释,以及所有预处理步骤
- 对于自然语言数据,语言的名称
- 指向数据集或模拟环境的可下载版本的链接
- 对于收集到的新数据,对数据收集过程的完整描述,如对注释者的说明和质量控制方法
论文提交和模板
提交是电子的,使用Softconf启动会议管理系统。提交网站将于2021年1月8日开放。长论文和短论文都必须遵循ACL作者指南。
论文提交必须使用官方的ACL-IJCNLP 2021样式模板,该模板可作为背面模板使用,也可直接下载(Latex和Word)。请遵循纸张格式指南,以便在此处*ACL会议。模板本身只包含特定的注释(例如.tex文件中的乳胶注释)。
请不要修改这些样式文件,或使用为其他会议设计的模板。不符合要求样式(包括纸张大小、页边宽度和字体大小限制)的提交将被拒绝,无需审查。在主要论文中包含附录的提交文件将不经审查而被拒绝。
评审表将在截止日期前提供。
可选补充材料:附录、软件和数据
每个ACL-IJCNLP 2021提交文件都可以附带一个PDF附录、一个包含软件的.tgz或.zip存档以及一个包含数据的.tgz或.zip存档。ACL-IJCNLP 2021鼓励提交这些补充材料,以提高结果的再现性,并使作者能够提供不适合本文的额外信息。例如,预处理决策、模型参数、特征模板、冗长的证明或推导、伪代码、样本系统输入/输出,以及准确复制本文所述工作所需的其他细节可以放在附录中。然而,提交的论文必须保持完全独立,因为这些补充材料是完全可选的,甚至不要求审查员审查或下载。如果伪代码或派生代码或模型规范是贡献的重要组成部分,或者如果它们对评审人员评估工作的技术正确性很重要,则它们应该是主要论文的一部分,而不是出现在附录中。补充材料需要完全匿名,以保持双盲审查政策。
注:补充材料不计入页数限制,不应包含在纸张中,但必须使用提交网站上的相应字段单独提交。附录最多可包含四(4)页。
陈述要求
所有被接受的论文必须在会议上提出,才能在会议记录中出现。被接受在ACL-IJCNLP 2021上发表的论文的作者如果希望撤回论文,必须在相机准备好的截止日期前通知项目主席。
每一篇被接受论文的至少一位作者必须在提前的注册截止日期之前注册ACL-ijcnlp2021。
提交是电子的,使用Softconf启动会议管理系统。提交网站将于2021年1月8日开放。长论文和短论文都必须遵循ACL作者指南。
论文提交必须使用官方的ACL-IJCNLP 2021样式模板,该模板可作为背面模板使用,也可直接下载(Latex和Word)。请遵循纸张格式指南,以便在此处*ACL会议。模板本身只包含特定的注释(例如.tex文件中的乳胶注释)。
请不要修改这些样式文件,或使用为其他会议设计的模板。不符合要求样式(包括纸张大小、页边宽度和字体大小限制)的提交将被拒绝,无需审查。在主要论文中包含附录的提交文件将不经审查而被拒绝。
评审表将在截止日期前提供。