? ? ? ? 以下內(nèi)容鏈接：Call for Main Conference Papers - EMNLP 2023

???????

目錄

????????審核流程：

????????與 ARR 的交叉提交政策

? ? ? ? 注意：

? ? ? ? 注意：

????????重要日期

?????????強(qiáng)制性摘要提交

? ? ? ? 提交方向

????????論文提交信息

????????論文提交和模板

????????確認(rèn)

????????長論文

????????短文

????????貢獻(xiàn)

?演示模式

?著作權(quán)

引用與比較

多次提交政策

可選：粘性評論

局限性的強(qiáng)制性討論

主題曲目：大型語言模型和 NLP 的未來

道德政策

可選補(bǔ)充材料

附錄、軟件和數(shù)據(jù)

匿名期

雙盲評審說明

再現(xiàn)性標(biāo)準(zhǔn)

演示要求

?????????2023 年自然語言處理實(shí)證方法會(huì)議 (EMNLP 2023) 邀請?zhí)峤魂P(guān)于自然語言處理實(shí)證方法的大量、原創(chuàng)和未發(fā)表研究的長篇和短篇論文。與近年來一樣，會(huì)議上的一些演講將針對被 ACL Transactions?(TACL) 和計(jì)算語言學(xué) (CL) 期刊接受的論文。

????????EMNLP 2023 將遵循 EMNLP 2022 和 ACL 2023，并采用關(guān)于 ARR 的混合格式。這意味著雖然 EMNLP 將接受 ARR 評審的論文，但它也將直接接受提交給 EMNLP 的論文。

????????然而，為了使整個(gè)社區(qū)的審查負(fù)擔(dān)保持可控，我們需要讓作者預(yù)先決定他們是想通過 ARR 還是 EMNLP 進(jìn)行審查。

????????審核流程：

????????直接提交給 EMNLP 的論文將有“常規(guī)”審查程序：論文由 3 名審稿人審查，如果被接受，作者將被邀請?jiān)赾amera ready好的截止日期前寫下作者回復(fù)并修改他們的論文。提交給 EMNLP 的 ARR 論文將由高級領(lǐng)域主席處理。對于這些論文，作者可以提供作者回復(fù)但不能修改他們的論文（除了添加所需的“限制”部分，如果它在 ARR 提交中缺失；見下文）。

????????與 ARR 的交叉提交政策

????????任何在 ARR 會(huì)議承諾截止日期（2023 年 8 月 22 日）之前獲得所有評論和元評論的 ARR 評審論文都可以提交給 EMNLP 2023。

? ? ? ? 注意：

????????來自 ARR 的提交不能修改，除非它們可以與作者的回復(fù)相關(guān)聯(lián)。

????????EMNLP 將考慮在 2023 年 8 月 22 日承諾截止日期之前已經(jīng)過全面審查的任何 ARR 論文。常規(guī) ARR 時(shí)間表建議 ARR 提交應(yīng)在 6 月 15 日之前提交。因此，如果作品在電話會(huì)議之前未在任何地方提交，則必須謹(jǐn)慎決定是否應(yīng)直接向 ARR 或 EMNLP 提交作品。按計(jì)劃行事。

????????直接提交論文，即非ARR提交論文的截止日期為2023年6月23日。

????????2023 年 5 月 24 日之前提交給 ARR 的論文可以撤回并提交給 EMNLP 2023。

? ? ? ? 注意：

????????為了將論文直接提交給 EMNLP 2023，它必須在 ARR 系統(tǒng)中處于非活動(dòng)狀態(tài)。這意味著投稿必須被作者明確撤回，或者 ARR 評審在 5 月 24 日之前完成并與作者共享，并且該論文沒有重新提交給 ARR。

????????作者可以在 2023 年 5 月 24 日之前退出 ARR，無論他們收到了多少評論。

????????2023 年 5 月 24 日之后在 ARR 系統(tǒng)中的論文，無論是之后提交還是之前提交且未撤回，都不能提交給 EMNLP 2023。

????????提交給 EMNLP 2023 的論文在 EMNLP 2023 審查期間不得提交其他地方（包括 ARR）審查。

????????與“標(biāo)準(zhǔn)”近期會(huì)議的主要區(qū)別包括：

????????混合 ARR + EMNLP 模式。

????????限制的強(qiáng)制性討論。

????????主題：大型語言模型和 NLP 的未來

????????重要日期

?????????強(qiáng)制性摘要提交

????????論文標(biāo)題、作者姓名、聯(lián)系方式和簡短摘要必須在摘要提交截止日期（6 月 16 日）之前通過 EMNLP 2023 論文提交網(wǎng)站以電子方式提交。在完整論文提交截止日期之前，可以對標(biāo)題和摘要進(jìn)行小幅修改，但您不能更改作者和主題領(lǐng)域。帶有“占位符”摘要的提交將不加考慮地刪除；

????????重要提示：如果您錯(cuò)過了摘要提交截止日期，則無法提交全文。

? ? ? ? 提交方向

????????EMNLP 2023 的目標(biāo)是廣泛的技術(shù)計(jì)劃。會(huì)議的相關(guān)主題包括但不限于以下領(lǐng)域（按字母順序排列）：

????????常識推理

????????計(jì)算社會(huì)科學(xué)與文化分析

????????對話與互動(dòng)系統(tǒng)

????????話語與語用

????????自然語言處理的有效方法

????????自然語言處理中的倫理問題

????????以人為中心的自然語言處理

????????信息抽取

????????信息檢索和文本挖掘

????????自然語言處理模型的可解釋性、交互性及分析

????????語言基礎(chǔ): 視覺、機(jī)器人及其他

????????語言建模與語言模型分析

????????語言學(xué)理論、認(rèn)知建模與心理語言學(xué)

????????自然語言處理中的機(jī)器學(xué)習(xí)

????????機(jī)器翻譯

????????多語言與語言多樣性

????????自然語言生成

????????自然語言處理程序申請

????????音系學(xué)、形態(tài)學(xué)與分詞

????????問題解答

????????資源和評價(jià)

????????語義: 詞匯、句子層面、文檔層面、語篇推理等。

????????情感分析、文體分析與論證挖掘

????????語音與多模態(tài)

????????總結(jié)???????

????????語法、語法分析及其應(yīng)用

????????主題

????????論文提交信息

????????論文提交和模板

????????提交是電子的。長篇論文和短篇論文都必須遵循 EMNLP 2023 兩欄格式，使用提供的官方樣式文件。模板可以在樣式文件和格式中下載。請不要修改這些樣式文件，也不要使用為其他會(huì)議設(shè)計(jì)的模板。不符合要求樣式（包括紙張大小、邊距寬度和字體大小限制）的提交將被拒絕，恕不審查。

????????確認(rèn)

????????為了保證符合發(fā)布標(biāo)準(zhǔn)，我們將使用 ACL Pubcheck 工具 (https://github.com/acl-org/aclpubcheck)。準(zhǔn)備好上鏡的論文的 PDF 必須在最終提交之前通過此工具運(yùn)行，我們建議在提交時(shí)也使用它。

????????長論文

????????長篇論文提交必須描述實(shí)質(zhì)性的、原創(chuàng)的、已完成的和未發(fā)表的工作。在適當(dāng)?shù)那闆r下，應(yīng)包括具體的評估和分析。審核表格將在截止日期前提供。長篇論文最多可包含 8 頁內(nèi)容，外加無限頁數(shù)的參考文獻(xiàn)和附錄；長篇論文的最終版本將額外提供一頁內(nèi)容（最多 9 頁），以便審稿人的評論可以被考慮在內(nèi)。

????????短文

????????提交的短文必須描述原創(chuàng)和未發(fā)表的作品。請注意，短論文不是縮短的長論文。相反，短篇論文應(yīng)該有一個(gè)可以在幾頁內(nèi)完成的觀點(diǎn)。

????????短文最多可包含 4 頁的內(nèi)容，外加無限的參考文獻(xiàn)和附錄。接受后，短論文將在會(huì)議記錄中提供 5 個(gè)內(nèi)容頁。鼓勵(lì)作者在最終版本中使用此附加頁面來處理審稿人的評論。

????????貢獻(xiàn)

????????2023年 EMNLP 歡迎以下各類捐助:

????????計(jì)算輔助語言分析(模型或數(shù)據(jù)資源)

????????自然語言處理工程實(shí)驗(yàn)

????????繁殖研究

????????新的數(shù)據(jù)資源，特別是低資源語言的數(shù)據(jù)資源

????????數(shù)據(jù)和計(jì)算效率的方法

????????立場文件

????????調(diào)查

????????公開提供的軟件和預(yù)先培訓(xùn)的模型

????????雖然貢獻(xiàn)類型和論文長度之間沒有直接映射，但某些類型的論文自然會(huì)傾向于一定的長度：例如調(diào)查更有可能是長篇而不是短篇論文。一篇論文可以做出不止一種不同類型的貢獻(xiàn)。

?演示模式

????????由項(xiàng)目委員會(huì)決定，長篇和短篇論文將以口頭形式或海報(bào)形式呈現(xiàn)。關(guān)于哪些論文將以口頭形式展示以及哪些作為海報(bào)展示的決定將基于作品的性質(zhì)而不是作品的質(zhì)量。雖然在會(huì)議記錄中短篇論文與長篇論文有所區(qū)別，但在會(huì)議記錄中口頭和海報(bào)形式的論文沒有區(qū)別。

?著作權(quán)

????????提交的作者列表應(yīng)包括所有（且僅）對提交的工作做出重大貢獻(xiàn)的個(gè)人。提交給 EMNLP 2023 的每位作者都將收到有關(guān)提交、修訂和最終決定的通知。在摘要提交截止日期之后，不得對提交給 EMNLP 2023 的作者的順序或組成進(jìn)行任何更改。

引用與比較

????????您應(yīng)該引用與您的提交相關(guān)的所有參考出版物，但您可能會(huì)因?yàn)椴恢浪形窗l(fā)表的作品（尤其是最近發(fā)布和/或未被廣泛引用的作品）而被原諒。雖然在提交時(shí)未引用此類未發(fā)表的作品不足以成為拒絕論文的理由，但如果審稿人通知您，您應(yīng)該準(zhǔn)備好在camera ready上引用此類相關(guān)作品。

????????如果預(yù)印本已被參考出版物取代，則應(yīng)引用參考出版物而不是預(yù)印本版本。在提交截止日期前不到 3 個(gè)月出現(xiàn)的論文（無論是否經(jīng)過審閱）被視為與您提交的論文同期，因此您沒有義務(wù)進(jìn)行需要額外實(shí)驗(yàn)和/或深入分析的詳細(xì)比較。但是，您應(yīng)該在提交中提及此類作品，并在直接相關(guān)的情況下列出其發(fā)表的結(jié)果。

????????有關(guān)詳細(xì)信息，請參閱 ACL 提交、審閱和引用政策。（New Policies for Submission, Review and Citation | ACL Member Portal）

多次提交政策

????????EMNLP 2023 將不考慮提交時(shí)正在期刊或其他會(huì)議上審查的任何論文，并且提交的論文不得在 EMNLP 2023 審查期間提交到其他地方。該政策涵蓋所有參考和存檔會(huì)議和研討會(huì)（例如 NeurIPS、ACL 研討會(huì)）以及 ARR。此外，我們不會(huì)考慮任何與將要（或已經(jīng)）在其他地方發(fā)表的論文在內(nèi)容或結(jié)果上有顯著重疊的論文。向 EMNLP 2023 提交多于一篇論文的作者必須確保他們提交的論文在內(nèi)容或結(jié)果上沒有明顯重疊（>25%）。? ?

????????EMNLP 2023 也將接受 ARR 評審論文的提交，前提是 ARR 評審和元評審在 ARR 會(huì)議提交截止日期前可用。但是，EMNLP 2023 將不接受正在 ARR 中積極審查的直接提交，或與此類提交顯著重疊（>25%）的提交。

可選：粘性評論

????????之前在其他 *ACL 場地（但不是通過 ARR）審查過的論文可以選擇將論文連同他們之前提交的信息一起提交，軌道主席將能夠從中訪問舊的評論。他們還可以提交一份簡短的解釋，說明論文是如何根據(jù)舊評論進(jìn)行更改的。此選項(xiàng)可能對解決了之前發(fā)現(xiàn)的問題的作者有益，并且可以強(qiáng)烈爭論論文的改進(jìn)方式。新審稿人看不到之前的審稿，但區(qū)域主席和項(xiàng)目主席可能會(huì)在審稿質(zhì)量控制、解決審稿人之間的分歧以及決定邊界論文時(shí)使用它們。

局限性的強(qiáng)制性討論

????????我們認(rèn)為，除了長處之外，討論您工作的局限性也很重要。 EMNLP 2023 要求所有論文在標(biāo)題為“局限性”的專門部分中明確討論局限性。這部分將出現(xiàn)在論文的末尾，在討論/結(jié)論部分之后和參考文獻(xiàn)之前，并且不計(jì)入頁數(shù)限制。沒有限制部分的論文將被自動(dòng)拒絕，無需審查。

????????ARR 審查的論文在之前提交的文件中沒有包含“限制”部分，應(yīng)在提交 EMNLP 2023 的同時(shí)提交包含此類部分的 PDF。

????????雖然我們對不同類型的局限性持開放態(tài)度，但僅提及僅針對英語顯示了一組結(jié)果可能并不能反映我們的預(yù)期。提到該方法主要適用于形態(tài)有限的語言，如英語，是一個(gè)更好的選擇。此外，諸如對長文本的低可擴(kuò)展性、對大型 GPU 資源的要求或其他激發(fā)關(guān)鍵的進(jìn)一步研究的事情等限制也是受歡迎的。

主題曲目：大型語言模型和 NLP 的未來

????????我們很高興地宣布 EMNLP 2023 將有一個(gè)新主題，目標(biāo)是激發(fā)圍繞大型語言模型和 NLP 的未來的討論。雖然新一代大型語言模型（如 GPTX、LLAMA、BLOOM 等）聲稱在生成和理解方面表現(xiàn)出前所未有的水平，但我們在此類 LLM 的許多方面仍處于未開發(fā)領(lǐng)域，包括各種 NLP 任務(wù)和語言的性能、數(shù)據(jù)、主權(quán)、公平、可解釋性、倫理、透明度、NLP 應(yīng)用等。

????????主題軌道邀請實(shí)證和理論研究，以及關(guān)于此類 LLM 在 NLP 任務(wù)和應(yīng)用程序中執(zhí)行方式的立場和調(diào)查論文，以及這對 NLP 作為一個(gè)領(lǐng)域的未來意味著什么?？赡艿挠懻撝黝}包括（但不限于）以下內(nèi)容：

????????當(dāng)前這一代的 LLM 在 NLP 任務(wù)和應(yīng)用程序上的表現(xiàn)有多可靠？

????????這些LLM如何涵蓋語言多樣性？

????????此類 LLM 以及恢復(fù)策略和方法有哪些不同的系統(tǒng)性故障？

????????這些模型是否增強(qiáng)了（對語言、認(rèn)知或深度學(xué)習(xí)技術(shù)的）科學(xué)理解？以什么方式？

????????關(guān)于此類模型的設(shè)計(jì)和使用，有哪些不同的倫理和 FATE 相關(guān)考慮因素？

????????LLM 為 NLP 研究提供了哪些機(jī)會(huì)？

? ? ? ? LLM如何獲取世界知識？

????????我們?nèi)绾尾拍軐F(xiàn)有的知識庫有效地整合到 LLM 中？

????????我們?nèi)绾螐谋举|(zhì)上評估此類模型的性能（不涉及下游應(yīng)用程序）

????????這些模型如何影響未來 NLP 研究的方式？

????????這些模型在 NLP 研究和實(shí)際應(yīng)用中的性能可復(fù)制性如何？

????????提交的主題曲目可以是長的也可以是短的。除了其他類別的獎(jiǎng)項(xiàng)外，我們預(yù)計(jì)將在會(huì)議上就此主題舉行特別會(huì)議，并設(shè)立專題論文獎(jiǎng)

道德政策

????????作者必須遵守 ACL 道德規(guī)范中規(guī)定的道德規(guī)范。對我們研究的倫理影響、數(shù)據(jù)的使用以及我們工作的潛在應(yīng)用的考慮一直是一個(gè)重要的考慮因素，隨著人工智能變得越來越主流，這些問題也越來越相關(guān)。我們要求所有作者閱讀代碼，并確保他們的工作符合此代碼。如果一篇論文可能提出倫理問題，我們要求您在論文中明確討論這些問題，這將在審查過程中予以考慮。我們保留以道德為由拒絕論文的權(quán)利，如果作者被認(rèn)為違反了道德準(zhǔn)則，或者他們的工作沒有充分解決合法的道德問題。

????????在第 8 頁（短論文為第 4 頁）之后，作者將被允許有額外的空間用于可選的更廣泛的影響聲明或其他道德討論。 EMNLP 審查表將包括一個(gè)解決這些問題的部分，審查員或 AC 標(biāo)記為道德問題的論文將由道德委員會(huì)進(jìn)一步審查。請注意，道德考慮部分不是必需的，但處理敏感數(shù)據(jù)或不討論這些問題的敏感任務(wù)的論文將不被接受。相反，僅包含道德考慮部分并不能保證接受。除了接受或拒絕，論文可能會(huì)收到有條件的接受建議。指定為有條件接受的論文的camera將由倫理委員會(huì)重新審查，以確定是否已充分解決問題。請閱讀道德常見問題解答，以獲取有關(guān)需要注意的一些問題和需要考慮的與道德準(zhǔn)則相關(guān)的關(guān)鍵問題的更多指導(dǎo)。

可選補(bǔ)充材料

附錄、軟件和數(shù)據(jù)

????????每個(gè) EMNLP 2023 提交都可以附有一個(gè)附錄，該附錄將出現(xiàn)在主要論文的 PDF 中，在參考書目之后。一份提交文件還可能附有一個(gè)包含軟件的 .tgz 或 .zip 存檔文件，以及一個(gè)包含數(shù)據(jù)的 .tgz 或 .zip 存檔文件。 EMNLP 2023 鼓勵(lì)提交這些補(bǔ)充材料以提高結(jié)果的可重復(fù)性，并使作者能夠提供論文中不適合的額外信息。例如，匿名相關(guān)工作（見上文）、預(yù)處理決策、模型參數(shù)、特征模板、冗長的證明或推導(dǎo)、偽代碼、樣本系統(tǒng)輸入/輸出，以及準(zhǔn)確復(fù)制論文中描述的工作所需的其他細(xì)節(jié)可以放到附件中。然而，論文提交需要保持完全獨(dú)立，因?yàn)檫@些補(bǔ)充材料是完全可選的，審稿人甚至不需要審閱或下載它們。如果偽代碼或推導(dǎo)或模型規(guī)范是貢獻(xiàn)的重要部分，或者如果它們對于審稿人評估工作的技術(shù)正確性很重要，則它們應(yīng)該是主要論文的一部分，而不是出現(xiàn)在正文中附錄。補(bǔ)充材料需要完全匿名以保持雙盲審查政策。

匿名期

????????以下規(guī)則和指南旨在保護(hù)雙盲審查的完整性并確保提交的內(nèi)容得到公平審查。規(guī)則參考了匿名期，從提交截止日期前 1 個(gè)月（2023 年 5 月 23 日開始）到您的論文被接受或拒絕之日（2023 年 10 月 6 日）。在此期間撤回的論文將不再受這些規(guī)則的約束。

????????在匿名期間，您不得將您論文的非匿名版本在線提供給一般社區(qū)（例如，通過預(yù)印本服務(wù)器）。論文的版本包括科學(xué)內(nèi)容基本相同但可能在次要細(xì)節(jié)（包括標(biāo)題和結(jié)構(gòu)）和/或長度上有所不同的論文。

????????如果您在匿名期開始前在線發(fā)布了論文的非匿名版本，您可以向會(huì)議提交匿名版本。提交的版本不得引用非匿名版本，并且您必須通知程序主席存在非匿名版本。????????

????????您在匿名期間不得更新非匿名版本，我們要求您在匿名期間不要在社交媒體上宣傳或采取其他會(huì)進(jìn)一步損害雙盲評審的行為。

????????即使在匿名期間，您也可以提供論文的匿名版本（例如，在 OpenReview 上）。

????????對于 arXiv 提交，2023 年 5 月 23 日晚上 11:59 UTC-12h（地球上的任何地方）是論文可以上傳的最晚時(shí)間。

雙盲評審說明

????????由于評審將是雙盲的，論文不得包含作者姓名和隸屬關(guān)系。此外，必須避免顯示作者身份的自我引用或鏈接（例如 github），例如“我們以前展示過（史密斯，1991 年）……”。相反，使用諸如“Smith previously showed (Smith, 1991) …”之類的引文，不符合這些要求的論文將被拒絕，恕不審查。為了獲得更多細(xì)節(jié)，論文不應(yīng)參考審稿人無法獲得的文件。例如，不要省略或編輯重要的引文信息以保持匿名。取而代之的是，使用第三人稱或命名引用來引用這項(xiàng)工作，如上所述（“Smith showed”而不是“we showed”）。如果審稿人無法獲得重要的引文（例如，等待發(fā)表），則這些論文應(yīng)匿名并包含在附錄中。然后可以在不影響匿名的情況下從提交中引用它們。論文可能附有論文中描述的資源（軟件和/或數(shù)據(jù)），但這些資源也應(yīng)匿名。

再現(xiàn)性標(biāo)準(zhǔn)

????????審稿人將被要求評估工作的可重復(fù)性，作為他們審稿的一部分。以下是審查將考慮的標(biāo)準(zhǔn)。

????????對于所有報(bào)告的實(shí)驗(yàn)結(jié)果：

????????對數(shù)學(xué)設(shè)置、算法和/或模型的清晰描述

????????提交包含源代碼的 zip 文件，其中包含所有依賴項(xiàng)的規(guī)范，包括外部庫，或此類資源的鏈接（雖然仍是匿名的） 所用計(jì)算基礎(chǔ)設(shè)施的描述

????????每個(gè)模型或算法（例如，訓(xùn)練、推理等）的平均運(yùn)行時(shí)間，或估計(jì)的能源成本

????????每個(gè)模型中的參數(shù)數(shù)量

????????每個(gè)報(bào)告的測試結(jié)果對應(yīng)的驗(yàn)證性能

????????所用評估指標(biāo)的說明，以及代碼鏈接

對于所有使用超參數(shù)搜索的實(shí)驗(yàn)：

????????訓(xùn)練和評估運(yùn)行的確切數(shù)量

????????每個(gè)超參數(shù)的界限

????????最佳性能模型的超參數(shù)配置

????????超參數(shù)搜索試驗(yàn)次數(shù)

????????選擇超參數(shù)值的方法（例如，均勻采樣、手動(dòng)調(diào)整等）以及用于在其中進(jìn)行選擇的標(biāo)準(zhǔn)（例如，準(zhǔn)確性）

????????結(jié)果的匯總統(tǒng)計(jì)（例如，均值、方差、誤差線等）

對于所有使用的數(shù)據(jù)集：

????????相關(guān)詳細(xì)信息，例如語言、示例數(shù)量和標(biāo)簽分布

????????訓(xùn)練/驗(yàn)證/測試拆分的詳細(xì)信息????????

????????任何被排除的數(shù)據(jù)的解釋，以及所有預(yù)處理步驟

????????包含數(shù)據(jù)或數(shù)據(jù)可下載版本鏈接的 zip 文件

????????對于收集的新數(shù)據(jù)，數(shù)據(jù)收集過程的完整描述，例如對注釋者的說明和質(zhì)量控制方法。

此列表基于 Dodge 等人，2019 年和 Joelle Pineau 的再現(xiàn)性清單。

演示要求

????????所有被接受的論文都必須在會(huì)議上提交——無論是在線的還是面對面的——以便出現(xiàn)在會(huì)議記錄中。在 EMNLP 2023 上接受發(fā)表的論文的作者如果希望撤回論文，必須在camera ready好的截止日期前通知項(xiàng)目主席。

????????每篇被接受論文的至少一位作者必須在提前注冊截止日期前注冊 EMNLP 2023。

????????更多信息可以在委員會(huì)博客中找到。如果您有在那里沒有得到解答的問題，請發(fā)送電子郵件至 emnlp-2023-pc@googlegroups.com 向計(jì)劃聯(lián)合主席發(fā)送電子郵件。文章來源地址http://www.zghlxwxcb.cn/news/detail-464018.html

到了這里，關(guān)于EMNLP -- Call for Main Conference Papers的文章就介紹完了。如果您還想了解更多內(nèi)容，請?jiān)谟疑辖撬阉鱐OY模板網(wǎng)以前的文章或繼續(xù)瀏覽下面的相關(guān)文章，希望大家以后多多支持TOY模板網(wǎng)！