导语
记录EMNLP 2022投稿要求,原网址连接:https://2022.emnlp.org/calls/papers/Overview 。
要点记录
由于原网页内容较多,这里列几个我认为值得注意的地方。
- 必须在6.17前提交摘要,否则6.24前无法提交全文。
- 今年要求论文在Discussion/Conclusion之后添加一个Limitation章节来讨论本文工作的局限性,这个是强制要求加,不加会直接Reject。但这个章节不占正文内容。
- 不能在匿名期间更新非匿名版本,如果在匿名期前已经有了非匿名版本的arxiv,则需要额外向PC说明。
总览(Overview)
2022年自然语言处理实证方法大会(EMNLP 2022)诚邀有关自然语言处理实证方法的大量、原创和未发表研究的长短论文投稿。近年来,会议上的一些报告将被ACL (TACL)和计算语言学(CL)期刊接受。
EMNLP 2022将在EMNLP 2021之后,在ARR方面采用混合格式。这意味着,虽然EMNLP将接受arr审查的论文,它也将接受通过START系统直接提交给EMNLP的论文。
然而,为了使社区的评审负担作为一个整体易于管理,我们需要请作者预先决定他们是希望通过ARR还是EMNLP进行评审。
评审过程(Review Process)
直接提交给EMNLP的论文将有定期的评审过程:论文由3名评审人员评审,如果被录用,作者将被邀请在截止日期前撰写作者回复并修改他们的论文。对EMNLP作出承诺的研究报告将由高级区域主席处理。对于这些论文,作者可以提供一个作者回复,但不修改他们的论文(如果ARR提交中缺失了,可以添加必要的限制部分;见下文)。
ARR的交叉提交政策(Cross Submission Policy with ARR)
在arr到会议提交截止日期(2022年7月24日)之前获得所有Review和Meta Review的arr论文,可以提交给2022年的EMNLP。
- 注意:ARR提交的内容不能被修改,除非它们可以与作者回复相关联。
- 注意:虽然EMNLP会考虑在2022年7月24日之前全部通过审核的ARR论文,但与ACL和NAACL不同的是,ARR不保证在该日期之前提交的所有论文都能在EMNLP截止日期前及时收到必要的审核。因此,在决定是否直接提交给ARR或EMNLP时,必须谨慎,如果工作在会议之前没有提交过。请合理规划。
- 注意:START系统直接提交论文即非arr提交论文的截止日期为2022年6月24日。
在2022年5月24日前提交到ARR的论文,可以撤回并提交到EMNLP 2022。
- 注:一篇论文要直接提交到EMNLP 2022,必须在ARR系统中处于非激活状态。这意味着提交的论文必须被作者明确撤回,或者在5月24日前完成ARR评审并与作者共享,论文不能再提交到ARR。
- 注:作者可于2022年5月24日前退出ARR,无论收到多少评论。
在2022年5月24日之后在ARR系统中提交的论文,无论是在5月24日之后提交的,还是在5月24日之前提交的,都不能提交到EMNLP 2022。
提交到EMNLP 2022的论文在EMNLP 2022审查期间不得提交到其他地方(包括ARR)进行审查。
与最近标准会议的主要区别包括:
- 混合ARR + EMNLP模型。
- 强制讨论限制。
- 主题:NLP的开放性问题、主要障碍和未解决的问题.
重要日期(Important Dates)
Anonymity period begins | May 24, 2022 |
---|---|
Abstract deadline for START direct submissions | June 17, 2022 |
Direct paper submission deadline (long & short papers) | June 24, 2022 |
Submission deadline for ARR papers | July 24, 2022 |
Author response period | Aug 23 – Aug 29, 2022 |
Notification of acceptance (long & short papers) | Oct 6, 2022 |
Camera-ready papers due (long & short papers) | Oct 21, 2022 |
Workshops & Tutorials | December 7-8, 2022 |
Conference | December 9-11, 2022 |
All deadlines are 11.59 pm UTC -12h (“anywhere on Earth”).
所有的时间都是AOE时间
强制摘要提交(Mandatory abstract submission)
论文标题、作者姓名、联系方式和摘要必须在摘要提交截止日期(6月17日)之前通过EMNLP 2022论文提交网站以电子方式提交。在全文提交截止日期之前,可以对标题和摘要进行小修改,但不能更改作者和主题领域。带有占位符摘要的提交将被删除;
非常重要提示!:如果你错过了摘要提交的截止日期,那么你就不能提交完整的论文。
提交(Submissions)
EMNLP 2022的目标是一个广泛的技术项目。会议的相关议题包括但不限于以下领域(按字母顺序):
- Computational Social Science and Cultural Analytics
- Dialogue and Interactive Systems
- Discourse and Pragmatics
- Efficient Methods for NLP
- Ethics
- Natural Language Generation
- Information Extraction
- Information Retrieval and Text Mining
- Interpretability, Interactivity and Analysis of Models for NLP
- Linguistic Theories, Cognitive Modeling and Psycholinguistics
- Machine Learning for NLP
- Machine Translation
- Multilinguality
- NLP Applications
- Phonology, Morphology and Word Segmentation
- Question Answering
- Resources and Evaluation
- Semantics: Lexical, Sentence level, Document Level, Textual Inference, etc.
- Sentiment Analysis, Stylistic Analysis, and Argument Mining
- Speech, Vision, Robotics, Multimodal Grounding
- Summarization
- Syntax, Parsing and their Applications
- Commonsense Reasoning
- Language Modeling and Analysis of Language Models
- Unsupervised and Weakly-Supervised Methods in NLP
- Theme Track
论文提交信息(Paper Submission Information)
长文(Long papers)
提交的长论文必须描述大量的、原创的、完成的和未发表的作品。应酌情列入具体的评价和分析。审核表格将在截止日期前提供。长论文的内容可达8页,参考文献和附录的页数不限;长论文的最终版本将给予额外的一页内容(最多9页),以便审稿人的意见可以被考虑。
短文(Short papers)
短论文提交必须描述原创和未发表的作品。请注意,短论文不是缩短的长论文。相反,简短的论文应该有一个可以在几页纸内阐述的观点。简短的论文可以包含最多4页的内容,以及无限的参考文献和附录。录用后,短文将在论文集中给予5页内容。鼓励作者在最终版本中使用这个附加页面来处理审阅者的评论。
展示(Presentation Mode)
长短论文将以口头或海报的形式呈现,由项目委员会决定。决定哪些论文将以口头形式,哪些以海报形式进行,将根据论文的性质而不是质量来决定。在会议过程中,虽然短论文与长论文有区别,但口头和海报形式的论文在会议过程中没有区别。
作者信息(Authorship)
提交作品的作者名单应包括所有(且仅限)对所提交作品做出重大贡献的个人。每个提交给EMNLP 2022的作品的作者都将被告知作品、修订和最终决定。在摘要提交截止日期之后,不得对提交给EMNLP 2022的文章的顺序或组成进行更改。
引用和比较(Citation and Comparison)
您需要引用所有与您提交的文章相关的参考文献,但您可能不知道所有未发表的文章(特别是最近发表的和/或没有被广泛引用的文章)。投稿时不引用未发表的作品并不足以作为被拒绝的理由,但如果审稿人通知了,请提前在相机中引用相关作品。
如预印本已被参考出版物取代,应引用参考出版物而不是预印本。在截止日期前不到3个月出现的论文(无论是否被引用)被认为与您提交的论文是同时代的,因此您没有义务进行详细的比较,需要额外的实验和/或深入分析。但是,你应该在你的投稿中提到这些作品,并列出他们发表的结果,如果他们是直接相关的。
有关更多信息,请参见提交、评审和引用的ACL策略。ACL Policies for Submission, Review, and Citation.
多重提交政策(Multiple Submission Policy)
EMNLP 2022不会考虑提交时在期刊或其他会议上正在审查的任何论文,并且在EMNLP 2022审查期间,已提交的论文不得在其他地方提交。本政策涵盖所有已审稿和存档会议和研讨会(例如,NeurIPS、ACL研讨会)以及ARR。此外,我们不会考虑任何在内容或结果上与即将(或已经)在其他地方发表的论文有明显重叠的论文。向EMNLP 2022提交一篇以上论文的作者必须确保其提交的论文在内容或结果上不存在显著重叠(>25%)。
EMNLP 2022也将接受ARR评审论文的提交,前提是ARR review和meta review可以在ARR到会议的提交截止日期前提交。然而,EMNLP 2022将不接受ARR中正在积极审查的直接提交,或与此类提交明显重叠(>25%)的直接提交。
强制性的限制讨论(Mandatory Discussion of Limitations)
我们认为,除了讨论你的工作的优点之外,讨论它的局限性也是很重要的。EMNLP 2022要求所有的论文都有一个明确的局限性讨论,在一个专门的章节标题为“Limitation”。 这部分将出现在文章的最后,在Discussion/Conclusion部分之后,在Reference之前,不计入页数限制。论文没有Limitation部分将不经Review直接Reject。
在之前提交的arr评审论文中没有包含“限制”部分的论文,应与EMNLP 2022提交的论文一起提交带有该部分的PDF。
虽然我们对不同类型的限制持开放态度,但仅仅提到一组只针对英语的结果可能并不能反映我们的预期。值得一提的是,该方法主要适用于词法有限的语言,比如英语,这是一个更好的选择。此外,诸如对长文本的低可伸缩性、对大型GPU资源的需求或其他激发关键的进一步研究的限制也是受欢迎的。
EMNLP 2022主题专场:NLP中的未决问题、主要障碍和未解决问题(EMNLP 2022 Theme Track: “Open questions, major obstacles, and unresolved issues in NLP”)
继之前的主要 NLP 会议主题专场取得成功之后,我们很高兴地宣布 EMNLP 2022 将有一个新主题,其目标是反映和激发对该领域状态的讨论,具有前瞻性的重点是揭示尚未解决的问题完成,以及如何到达那里:“NLP 中的开放性问题、主要障碍和未解决的问题。”虽然我们相信这个主题自然会引起立场文件,但我们特别鼓励发人深省的贡献,以 EMNLP 的传统,用经验证据支持他们的论点。
道德政策(Ethics Policy)
论文提交和模板(Paper Submission and Templates)
提交采用电子方式,采用Softconf START会议管理系统。长短论文都必须遵循EMNLP 2022两栏格式,使用提供的官方格式文件。请不要修改这些样式文件,也不要使用为其他会议设计的模板。提交的文件不符合要求的样式,包括纸张大小、页边距和字体大小限制,将会被拒绝。
为了保证与发布标准的一致性,我们将使用ACL Pubcheck工具(https://github.com/acl-org/aclpubcheck)。camera-ready的论文的pdf文件必须在最终提交前通过这个工具运行,我们建议在提交时也使用它。
可选补充材料:附录、软件和数据(Optional Supplementary Materials: Appendices, Software and Data)
EMNLP 2022的投稿可以在参考文献之后,在主要论文的PDF中添加附录。提交的文件还可以附带一个.tgz或.zip文件,其中包含软件,以及一个.tgz或.zip文件,其中包含数据。EMNLP 2022鼓励提交这些补充材料,以提高结果的可重复性,并使作者能够提供不适合论文的额外信息。例如,匿名的相关工作(见上文)、预处理决策、模型参数、特征模板、冗长的证明或推导、伪代码、示例系统输入/输出,以及对论文中描述的工作的精确复制所必需的其他细节,可以放在附录中。然而,论文提交需要保持完全独立,因为这些补充材料完全是可选的,甚至不要求审稿人审查或下载它们。如果伪代码或派生或模型规范是贡献的重要部分,或者如果它们对评审人员评估工作的技术正确性很重要,它们应该是主要论文的一部分,而不是出现在附录中。补充材料需要完全匿名,以保持双盲审查政策。
匿名期(Anonymity Period)
以下规则和指导方针旨在保护双盲审查的完整性,并确保提交的文件得到公平审查。规则中提到了匿名期,即从提交截止日期前1个月(2022年5月24日开始)到论文被接受或拒绝的日期(2022年10月6日)。在此期间被撤回的文件将不再受本规则的约束。
- 在匿名期间,您不能将您的论文的非匿名版本在线提供给一般社区(例如,通过预印服务器)。论文的不同版本包括具有基本相同的科学内容,但可能在次要细节(包括标题和结构)和/或长度上存在差异的论文。
- 如果您在匿名期开始之前已经在网上发布了论文的非匿名版本,您可以向会议提交一份匿名版本。提交的版本不能引用非匿名版本,你必须通知项目主席存在非匿名版本。
- 您不能在匿名期间更新非匿名版本,我们要求您不要在社交媒体上宣传该版本或采取其他会进一步危害匿名期间双盲审查的行动。
- 你可以让你的论文的匿名版本可用(例如,在OpenReview上),即使是在匿名期间。
- 对于arXiv提交,可以在2022年5月24日11:59pm UTC-12h(AOE时间)上传论文。
双盲评审指导建议(Instructions For Double-Blind Review)
由于本次评审采用双盲评审,论文不得包含作者姓名和所属单位。此外,还应避免使用“我们之前展示的(Smith, 1991)”等暴露作者身份的自我引用或链接(github等)。相反,使用Smith先前展示的引文(Smith, 1991),不符合这些要求的论文将不经审查而被拒绝。论文不应引用,进一步的细节,审稿人无法获得的文件。例如,不要省略或编辑重要的引用信息以保持匿名性。相反,使用第三人称或命名的引用,如上所述(史密斯展示而不是我们展示)。如果审稿人无法获得重要的引文(例如,等待出版),这些论文应匿名并列入附录。然后,他们可以在提交的材料中被引用,而不会影响其匿名性。论文可能附带论文中描述的资源(软件和/或数据),但这些资源也应匿名。
可复现性标准(Reproducibility Criteria)
评审人员将被要求评估工作的再现性,作为评审的一部分。以下是审查将考虑的标准。
- 对于所有报告的实验结果:对数学设置、算法和/或模型的清晰描述提交包含源代码的zip文件,包括所有依赖项的说明,包括外部库,或此类资源的链接(但仍然是匿名的)使用的计算基础设施的描述每个模型或算法的平均运行时间(例如,每个模型中的参数数量对应每个报告的测试结果的验证性能使用的评估指标的解释,并链接到代码
- 对于所有使用超参数搜索的实验:训练和评估的确切数量运行每个超参数的边界最佳模型的超参数配置超参数搜索试验的数量选择超参数值的方法(例如,均匀抽样,手动调优等)和用于其中选择的标准(例如,结果的汇总统计(例如,平均值、方差、误差条等)
- 对于使用的所有数据集:相关细节,如语言,示例和标签分发的数量训练/验证/测试分割的细节被排除的任何数据的解释,以及所有预处理步骤包含数据的zip文件或数据下载版本的链接对于收集的新数据,数据收集过程的完整描述,如注释说明和质量控制方法。这个列表是基于道奇等人,2019年和Joelle Pineau的可再现性清单。
展示要求(Presentation Requirement)
所有被录用的论文必须在线或亲自在会议上提交,才能出现在会议论文集中。参加EMNLP 2022的论文的作者如果想撤回论文,必须在camera-ready的截止日期前通知项目主席。在提前注册截止日期前,每篇被录取的论文必须至少有一名作者注册EMNLP 2022。更多信息可以在委员会的博客中找到。如果您有问题没有得到解答,请给该项目联合主席发邮件至emnlp2022pcs@gmail.com。