向一個著名的計算機科學(xué)會議提交論文有多難？

Gene Spafford的簡短回復(fù)幾乎指出了它。Gene Spafford回答了向一個著名的計算機科學(xué)會議提交論文有多難？

除了低接受率之外，審查過程中還存在大量噪音（隨機波動）。作為一個主要的例子，對于神經(jīng)網(wǎng)絡(luò)/深度學(xué)習(xí)領(lǐng)域的旗艦NIPS會議，口頭報告的接受率是非常低，甚至海報展示的接受率都很低。

與此同時，鑒于目前對深度學(xué)習(xí)的興趣激增，提交的數(shù)量正在激增。很難找到足夠的有能力的裁判將兩個或三個放在每篇論文上，特別是考慮到復(fù)習(xí)論文可能是研究人員可以花時間研究的最不討好的任務(wù)。我們中的許多人覺得有義務(wù)做一些審查作為我們領(lǐng)域的服務(wù)，但沒有真正的獎勵（除了偶爾有機會在其他人之前看到好的論文，但你不應(yīng)該利用你的東西）看，這很麻煩，并且需要很多時間來做正確的事。所有這些時間都被剝奪了我們自己的研究和寫自己的論文。

因此，我們最終會發(fā)現(xiàn)關(guān)注點被過度緊張，不感興趣或不稱職的評論者錯過或誤解的故事，或研究生被迫進入最后一分鐘服務(wù)審查論文的故事。

作為數(shù)據(jù)極客的NIPS社區(qū)花了一些時間來量化噪音量。沒有“基本事實” - 也就是說，沒有任何神諭可以說是否應(yīng)該接受論文 - 所以這些研究需要一些隨機的論文子集，將它們交給兩個NIPS典型的審稿人團隊，并期待看兩組的建議是否相同。下面有一些參考文獻，但谷歌搜索可以找到更多。

基本上，兩個群體似乎都拒絕了一些非常弱的論文，其中一些是明星也許這兩個群體都可以接受，并且對于應(yīng)該接受哪些其他群體存在可怕的分歧。因此，如果您能夠以某種方式向NIPS多次提交一份好的論文，每次都有不同的隨機選擇的裁判，有時會被會議接受，有時候也不會。

NIPS實驗

Nips實驗

HTTPS：//arxiv.org/pdf/1708.09794 ...

由于這樣的問題，我個人認(rèn)為會議和期刊使用無償專家裁判作為守門和錯誤檢查器，控制其他研究人員可以輕易看到的和他們不能看到的，是一個時間已經(jīng)過去的系統(tǒng)。

我想在將來，大家將能夠?qū)⑺麄兊恼撐姆湃胍恍┯谰么鏅n中，以便將來可靠地找到它。這應(yīng)該對讀者免費，理想情況下，對作者免費。這些紙張的簡單存儲和索引并不是非常昂貴，可以由政府或某些基金會負(fù)責(zé)。

很多東西都是垃圾。因此，我們需要建立一個質(zhì)量控制系統(tǒng)，根據(jù)該領(lǐng)域受尊敬的人的組織或非正式網(wǎng)絡(luò)標(biāo)記錯誤和問題，評估和推薦。這是我們現(xiàn)在在線評估和推薦產(chǎn)品和服務(wù)的方式的擴展。最好的論文會被注意到，因為很多人推薦它們。這不是一個絕對可靠的系統(tǒng)，但可能比現(xiàn)在更好 - 特別是如果我們仔細考慮如何將自我推銷，自私商業(yè)利益和網(wǎng)站優(yōu)化保持在游戲之外。

我沒有完整的設(shè)計，但這是我們應(yīng)該努力的方向。

如果成功，促銷委員會可以使用更可靠的在線聲譽標(biāo)記來代替當(dāng)前“出版物數(shù)量”指標(biāo)。

會議可以回到他們交換意見的最初目的，并且不再是促銷的標(biāo)記。

期刊可以通過邀請，可能包含許多主題問題等方式，專注于長篇形式的想法表達（正如今天更好的非同行評審期刊和技術(shù)出版物所做的那樣）。

昂貴的期刊濫用其作為學(xué)術(shù)質(zhì)量和進步的仲裁者的地位可能會瀕臨滅絕。

寶寶起名 起名