科研流程普通以下：你對年夜千世界中的一個細節發生獵奇。你做出假定，停止實驗，終究搜集到足夠的數據來支撐或辯駁你的假定。以上是科研中風趣的部門，接上去的任務就不那末輕松了：你要寫一篇論文，提交到學術期刊，然后在同業評審環節中忍耐一群同范疇的匿名專家對你任務質量的千般刁難。
同業評審有其缺點。人類（即使是迷信家）會有傾向性，懶散和無私。并且即便是迷信任務者，有時刻數學也會不很靈光。所以弗成防止的，一些人想要將人工從同業評審中剔除，以人工智能取而代之。盤算機以其公平、不知疲憊和無自我身份定位著稱，并且它們在實質上精曉算數。迷信家其實不只是干等著二進制年夜腦來介入科研同業評審，期注銷版商曾經在著手將之樹立。
比來，一個名為“ScienceIE”的比賽為法式開辟者設下挑釁。參賽團隊須要開辟法式，請求這些法式可以或許從迷信論文的句子中提取根本現實，并將其同其他論文所提取的根本現實停止比擬。“我的項目標年夜目的是贊助迷信家和從業者更疾速地取得有關其研討范疇的常識。”倫敦年夜學學院博士后AI研討員Isabelle Augenstein說，恰是她設計了這個比賽。
比賽觸及隨處理天然人類說話，這是諸多人工智能困難中的一個。參賽者設計法式來處理三個子義務：瀏覽每篇論文并肯定其癥結概念，按類型組織癥結詞，和辨認分歧癥結短語之間的關系。比賽不只僅是一場學術運動：Augenstein與世界最年夜的迷信出書商之一的Elsevier簽署了為期兩年的合同，為后者的藏書樓開辟盤算機對象。
Elsevier出書跨越7500種分歧期刊。每一個期刊的編纂都必需為每份來稿找到適合的審稿人。（2015年，70萬同業評審人員在Elsevier上評審了跨越180萬份稿件，個中40萬份終究獲得出書。）“可以或許評審稿件的人平日僅限于該范疇的專家。”數字地圖公司Descartes的CEO邁克·沃倫（Mike Warren）說。“你將這么一小群具有博士學位的專家按學科和子學科停止細分，最初，全球能夠只要100人有資歷核閱某份來稿。”Augenstein贊助Elsevier應用科技手腕為每篇稿件主動尋覓適合的審稿人。
Elsevier開辟了一套名為“Evise”的主動化對象來贊助停止同業評審。該法式可以或許檢討剽竊（這只是搜刮和婚配功效，還談不上AI），為審稿做最基本的把關。另外還有處置作者、編纂和審稿人之間的任務流程。別的幾家重要的出書商也都有主動化軟件來贊助停止同業評審。Springer-Nature當下正在測試一個名為“StatReviewer”的軟件，確保每份來稿具有完全和精確的統計數據。
不外這些同業在才能和愿景上都沒法同Elsevier等量齊觀。“我們正在查詢拜訪更有理想的義務，”Augenstein說。“當你對一篇論文有疑問，機械進修模子可以或許通讀論文并答復你的成績。”
不外并不是一切人都被“機械人博士”的遠景所困惑。上個月，芬蘭赫爾辛基年夜學情況政策傳授Janne Hukkinen和Elsevier雜志《生態經濟學》的編纂為WIRED撰寫了一篇文章，提示人們對完整主動的AI同業評審堅持小心：
“經由過程查詢出書商核閱著材料的數據庫，剖析過往評審中審稿人和編纂之間的交換，并辨認從提交到終究編纂點頭這一全部流程中的變更形式——進修型算法完整可以接收從最后提交到終究決議的全部評審進程。更主要的是，將人工從同業評審當中剔除，可以或許加重力圖開放的學者與否決開放的貿易出書商之間的重要關系。”
依照Hukkinen的邏輯，一個可以或許勝任同業評審的AI異樣也能夠動筆寫論文。終究，人類將成為科研中的遺留體系——冗余、低效又過時。他終究的不雅點是：“不經人類發生的新知將會搖動人類文明的基本。”
不外Hukkinen的小心有點憂愁過早。“雖然AI在象棋、圍棋和撲克如許的游戲中獲得偉大勝利，但依然不克不及懂得年夜多半通俗的英詞句子，更別說迷信文本了。”艾倫人工智能研討所（Allen Institute for Artificial Intelligence）首席履行官Oren Etzioni說。ScienceIE比賽團隊的實例或可為其供給左證：終究獲勝的團隊在三個子義務挑釁中只到達43%的分數。
充滿著主動句式的迷信論文艱澀至極，即使是在人腦看來也很難懂得。所描寫的對象常常隱身于層層前述以后，主動句式在平常說話眼前顯得深邃難明。說話學家將任何人類所寫的器械稱為“天然說話”，而天然說話在盤算機迷信家看來其實是一團亂麻。
“天然說話給AI帶來的一年夜困難是其隱約性”紐約年夜學盤算機迷信家Ernest Davis說。斯坦福年夜學聲譽盤算機迷信家Terry Winograd有一個經典的歧義例子：
市議會謝絕給請愿者允許，由于他們（擔憂／主意）暴力。
（The city councilmen refused the demonstrators a permit because they [feared/advocated] violence.）
這句子你我都能看明確，動詞“擔憂”暗示了“他們”指的是“市議會”而非請愿者。我們易如反掌地明確：請愿者“主意”暴力；市議會“擔憂”暴力。然則一個盤算機年夜腦可是會在此消費經年累月的時光終究也照樣弄不清晰究竟哪一個動詞指向哪一個代詞。這類類型的歧義只是天然說話纏結的一個縮影，同形異義詞和敘事邏輯將讓AI加倍困擾。
這還沒觸及迷信論文中的詳細成績，好比將文本論點同數據形式停止銜接等。即使在純數學論文中這一需求也很罕見。“從英語到數學中的情勢邏輯不是我們可以主動化的。”Davis說。“這是最簡略的任務之一。它是高度限制性的，而我們懂得目的。”心思學同等數學比擬遠的學科更是如斯。”在心思學論文中，我們簡直沒法檢討其論證的公道性。”Davis說。“我們不曉得若何以盤算機的方法來表達一個試驗。”
固然，一個完整主動的AI同業評審不只須要對人類有所懂得，還必需對其停止深刻思慮。“當你斟酌AI成績時，同業評審能夠是最難的一部門。由于同業評審最主要的職責是確保研討是新鮮的，沒有反復后人老路。”沃倫說。盤算機法式可以或許查閱文獻，找出那些成績依然懸而未決。然則它卻能夠有力識別出推翻性的迷信新發明。
俄勒岡州立年夜學AI研討員Tom Dietterich說：“或許我么只是須要轉變我們做迷信出書的方法。不是將我們的研討用英語寫成一個故事，而是將我們的看法和論據鏈接到一個正式化的構造中。好比一個涵蓋人類在某主題下一切常識的數據庫。”換句話說，將同業評審的法式電腦化，而不是其處理計劃。在這一點上，人們所要從新編程的不是盤算機，而是人類行動。
