對(duì)話(huà)神經(jīng)網(wǎng)絡(luò)奠基人：AI為何能回答你，卻不能理解你？

撰文｜戴晶晶

“你認(rèn)為大語(yǔ)言模型有情感嗎？”美國(guó)神經(jīng)科學(xué)家特倫斯·謝諾夫斯基（Terrence J. Sejnowski）在接受《知識(shí)分子》訪(fǎng)問(wèn)時(shí)，突然拋出了這個(gè)問(wèn)題，當(dāng)時(shí)他正在談?wù)揂I與生物智能的差異。

數(shù)百萬(wàn)年的演化造就了人類(lèi)繁復(fù)的大腦，而人工智能（AI）只用了幾十年，就已經(jīng)讓人們疑惑它是否學(xué)會(huì)了思考。

78歲的謝諾夫斯基是美國(guó)國(guó)家科學(xué)院、工程院、醫(yī)學(xué)院與藝術(shù)與科學(xué)學(xué)院“四院院士”，也是AI領(lǐng)域的頂級(jí)學(xué)術(shù)會(huì)議NeurIPS的主席，他的名字常與2024年諾貝爾物理學(xué)獎(jiǎng)得主杰弗里·辛頓（Geoffrey Hinton）、約翰·霍普菲爾德（John J. Hopfield）一并被提及。他與前者共同發(fā)明了玻爾茲曼機(jī)，為深度學(xué)習(xí)奠定了數(shù)學(xué)與算法的基礎(chǔ)，而后者是他在普林斯頓讀博士期間的導(dǎo)師。

作為最有資格談?wù)揂I的人之一，謝諾夫斯基也無(wú)法確定AI是否具有情感。因?yàn)椋L(zhǎng)期記憶、物理形態(tài)和語(yǔ)言能力依然是大語(yǔ)言模型（LLM）的欠缺之處，他在新書(shū)《大語(yǔ)言模型》中，將其比作“缸中之腦”——要實(shí)現(xiàn)真正的人工通用自主性（AGA）仍有距離。

謝諾夫斯基這種務(wù)實(shí)、冷靜的態(tài)度也同樣體現(xiàn)在了對(duì)AI潛在風(fēng)險(xiǎn)的描述上。和他的老搭檔辛頓將AI視作洪水猛獸不同，謝諾夫斯基從AI可能帶來(lái)的收益出發(fā)替它辯護(hù)，并呼吁監(jiān)管和科學(xué)界的自律。

面對(duì)仍像“黑箱”一般的LLM，謝諾夫斯基指出，前沿的AI研究需要全新的數(shù)學(xué)工具，而未來(lái)神經(jīng)科學(xué)與AI之間的交匯會(huì)產(chǎn)生重大突破。

以下為對(duì)話(huà)實(shí)錄，文字經(jīng)過(guò)編輯和刪節(jié)：

01 AI和人的本質(zhì)差別是什么？

《知識(shí)分子》：關(guān)于人與LLM之間關(guān)系的討論非常多。您在書(shū)中提到了一種反向圖靈測(cè)試（Reverse Turing Test）的概念。您能解釋一下嗎？

特倫斯·謝諾夫斯基：在ChatGPT正式發(fā)布前，學(xué)術(shù)界有機(jī)會(huì)使用這個(gè)工具，那時(shí)候我看到一篇關(guān)于它的文章，是兩位認(rèn)知科學(xué)專(zhuān)家對(duì)其進(jìn)行了測(cè)試。其中一位專(zhuān)家問(wèn)了很愚蠢的問(wèn)題：“倫敦橋第二次被運(yùn)到撒哈拉沙漠的時(shí)間是什么？”ChatGPT給出了一個(gè)日期，顯得很糟糕。另一位專(zhuān)家則提出了一個(gè)結(jié)合“心智理論”（Theory of Mind）的微妙問(wèn)題，涉及一個(gè)女孩和她男友的故事，需要理解他人的想法來(lái)推斷結(jié)果。令人驚訝的是，AI完全理解人類(lèi)思維中的細(xì)微差異。

我自己也開(kāi)始使用它，并且得出了一個(gè)結(jié)論：這些大語(yǔ)言模型實(shí)際上吸收了人類(lèi)的全部知識(shí)和個(gè)體風(fēng)格，比如它可以用海明威的風(fēng)格寫(xiě)短篇小說(shuō)，用俳句風(fēng)格寫(xiě)詩(shī)。它在某些情況下的表現(xiàn)甚至超過(guò)了普通人以及頂尖專(zhuān)家。

但問(wèn)題是，當(dāng)人類(lèi)提問(wèn)時(shí)，它怎么知道應(yīng)該采取哪種個(gè)性回答？于是它必須評(píng)估提問(wèn)人，如果你是個(gè)聰明的人，它就會(huì)以聰明的方式回答你，因?yàn)樗窃诜瓷淠愕闹腔邸．?dāng)然這只是我的一個(gè)假設(shè)，存在這種情況，如果你問(wèn)的是一些完全偏離主題或愚蠢的問(wèn)題，它也會(huì)陪你玩，因?yàn)樗J(rèn)為你在玩游戲。

所以與傳統(tǒng)圖靈測(cè)試不同，傳統(tǒng)測(cè)試是讓人類(lèi)判斷自己是否在與AI交流，而反向圖靈測(cè)試則是AI根據(jù)你的提問(wèn)方式評(píng)估你的智能。順帶一提，“智能（Intelligence）”本身也很難定義，有很多維度，科學(xué)家們甚至很難準(zhǔn)確界定和理解它。

ChatGPT于2022年11月向公眾推出，已經(jīng)過(guò)去三年了，就像一個(gè)外星人突然出現(xiàn)在我們面前，開(kāi)始和我們交流。唯一能確定的是，它不是人類(lèi)。

《知識(shí)分子》：作為腦科學(xué)家，您認(rèn)為目前的大語(yǔ)言模型在哪些方面最接近生物智能？又在哪些方面仍然相距甚遠(yuǎn)？

特倫斯·謝諾夫斯基：大語(yǔ)言模型具有一些局限性，特別是它們相較于人類(lèi)的差距。例如，它們?nèi)狈﹂L(zhǎng)期記憶。長(zhǎng)期記憶對(duì)我來(lái)說(shuō)，是指你能記住昨天發(fā)生的事，記得一年前的事情，甚至能回想起你小時(shí)候的記憶。

只要你在和LLM對(duì)話(huà)，它就能給出合理的回答，聽(tīng)起來(lái)就像是在跟人類(lèi)交流，似乎它理解你的問(wèn)題。然而，當(dāng)對(duì)話(huà)停止時(shí)，LLM就會(huì)“空白”掉。沒(méi)有任何活動(dòng)，沒(méi)有任何信息流動(dòng)。人類(lèi)可以在黑暗中靜坐思考，計(jì)劃第二天要做的事情，回想前一天發(fā)生的事。但LLM并不具備這種內(nèi)在的自我生成活動(dòng)，這也是它和人類(lèi)之間的一個(gè)巨大區(qū)別。

神經(jīng)科學(xué)正在研究人類(lèi)大腦如何自我生成活動(dòng)，如果我們能搞清楚這一點(diǎn)，或許能夠幫助我們?yōu)長(zhǎng)LM創(chuàng)造類(lèi)似的內(nèi)在活動(dòng)，讓它們更接近人類(lèi)。

這只是眾多差距中的一個(gè)例子。你認(rèn)為大語(yǔ)言模型有情感嗎？

《知識(shí)分子》：我不覺(jué)得它們有情感，但它們的行為看起來(lái)像有情感。

特倫斯·謝諾夫斯基：看起來(lái)它們有情感，但你怎么知道呢？問(wèn)題就在于，它們可能在模擬情感，而并沒(méi)有真正的體驗(yàn)。另外，現(xiàn)在的LLM沒(méi)有身體。所有人類(lèi)和動(dòng)物都依賴(lài)于身體和世界互動(dòng)，這樣大腦才能理解，怎么保持自身的安全、找到食物，亦或是成為社會(huì)的有用成員。當(dāng)然，學(xué)界也已經(jīng)開(kāi)始探索AI與機(jī)器人結(jié)合的方法。

語(yǔ)言也很重要。語(yǔ)言遠(yuǎn)比傳遞信息要來(lái)得要深刻，還包括社會(huì)化和行為規(guī)范。這就是AI中的“對(duì)齊（Alignment）”問(wèn)題，即我們?nèi)绾螌LM與文化對(duì)齊，使它們避免說(shuō)出冒犯性、危險(xiǎn)性或有偏見(jiàn)的內(nèi)容。

AI在這方面做得并不好。它們做的預(yù)訓(xùn)練和微調(diào)，其實(shí)是非常笨的做法，類(lèi)似于在模型成年后才設(shè)定規(guī)則，但人類(lèi)成長(zhǎng)過(guò)程中的教育方式是貫穿一生的，不斷通過(guò)獎(jiǎng)勵(lì)與懲罰來(lái)學(xué)習(xí)社會(huì)行為，這涉及我們大腦中專(zhuān)門(mén)處理獎(jiǎng)勵(lì)、懲罰和社交的部分，比如基底節(jié)（Basal Ganglia）。我們應(yīng)該借鑒自然界的經(jīng)驗(yàn)，因?yàn)樽匀灰呀?jīng)解決了這些問(wèn)題。大腦如何學(xué)習(xí)與行為對(duì)齊，是AI發(fā)展可以借鑒的重要方向。

《知識(shí)分子》：加州大學(xué)洛杉磯分校的數(shù)學(xué)家陶哲軒最近也表達(dá)了類(lèi)似的觀(guān)點(diǎn)，當(dāng)前的人工智能發(fā)展過(guò)于依賴(lài)經(jīng)驗(yàn)與計(jì)算能力，卻缺乏理論基礎(chǔ)，他認(rèn)為這會(huì)導(dǎo)致成功難以復(fù)制，失敗也難以解釋。您對(duì)此有何看法？

特倫斯·謝諾夫斯基：陶哲軒是一位極其出色的數(shù)學(xué)家，我很尊敬他。我認(rèn)為前沿的AI研究需要全新的數(shù)學(xué)工具。工程師往往是使用已有的數(shù)學(xué)，而新數(shù)學(xué)是一個(gè)完全不同層面的東西，陶哲軒正在做這方面的工作。我自己正在和另一個(gè)菲爾茨獎(jiǎng)得主斯坦尼斯拉夫·斯米爾諾夫（Stanislav Smirnov）合作，他是高維空間幾何學(xué)的專(zhuān)家。

歷史上很多重大進(jìn)展都是如此。例如牛頓發(fā)明微積分，傅里葉提出傅里葉變換，如今已成為工程學(xué)的日常工具。

你可能會(huì)說(shuō)需要等待科學(xué)家偉大的想法，事實(shí)上有好點(diǎn)子的是工程師。他們從直覺(jué)出發(fā)，靠試驗(yàn)與反復(fù)摸索造出有用的機(jī)器，比如蒸汽機(jī)。250年前，詹姆斯·瓦特靠實(shí)踐造出了（改良后）的蒸汽機(jī)，物理學(xué)家和數(shù)學(xué)家對(duì)機(jī)器產(chǎn)生能量的原理?yè)项^不解，于是才發(fā)展出熱力學(xué)理論。這一理論不僅解釋了蒸汽機(jī)，還讓其效率成倍提高，推動(dòng)了工業(yè)革命。

今天發(fā)生的事情與當(dāng)時(shí)類(lèi)似，只不過(guò)我們現(xiàn)在不是在放大人類(lèi)的物理能力，而是放大人類(lèi)的認(rèn)知能力。

上世紀(jì)80年代，神經(jīng)網(wǎng)絡(luò)和學(xué)習(xí)算法就是在試驗(yàn)和錯(cuò)誤中發(fā)展起來(lái)，我與杰弗里·辛頓合作，約翰·霍普菲爾德是我的論文導(dǎo)師，當(dāng)時(shí)統(tǒng)計(jì)、優(yōu)化等領(lǐng)域的頂尖專(zhuān)家都斷言我們做的事永遠(yuǎn)行不通，因?yàn)樵谒麄兛磥?lái)，函數(shù)優(yōu)化必然陷入無(wú)數(shù)局部最小值。但事實(shí)證明，在高維空間中，大多數(shù)點(diǎn)是“鞍點(diǎn)（saddle points）”而非局部極小值。現(xiàn)在，我們對(duì)為什么梯度下降算法能夠奏效有了更深的數(shù)學(xué)理解，也取得了新的進(jìn)展。

杰弗里·辛頓選擇了走向AI的道路，而在我的領(lǐng)域神經(jīng)科學(xué)，計(jì)算神經(jīng)科學(xué)正迎來(lái)黃金時(shí)期。

《知識(shí)分子》：AI繼續(xù)進(jìn)化，就不得不提到超級(jí)智能，您的搭檔杰弗里·辛頓就對(duì)其感到擔(dān)憂(yōu)。您的態(tài)度似乎比較積極，認(rèn)為可以找到辦法來(lái)管理其潛在的負(fù)面影響，為什么？

特倫斯·謝諾夫斯基：其實(shí)我們并不是第一次創(chuàng)造出可能構(gòu)成存在性威脅的技術(shù)。超級(jí)智能的潛在風(fēng)險(xiǎn)是它可能會(huì)摧毀我們，這就是所謂的存在性威脅。但事實(shí)上，我們已經(jīng)經(jīng)歷過(guò)類(lèi)似的威脅，核武器。我們已經(jīng)制造了能摧毀所有生命的武器，不僅僅是炸彈本身，而是它的放射性，能消滅人類(lèi)，甚至是所有物種。這是非常危險(xiǎn)的，但我們還是設(shè)法對(duì)其進(jìn)行了監(jiān)管，設(shè)法生存了下來(lái)。人類(lèi)足夠聰明，意識(shí)到所有國(guó)家共同控制核武器使用的利益是相互的，大家都能從中受益。

《知識(shí)分子》：針對(duì)武器的例子，其威力是得益于全球各國(guó)的協(xié)作才得以顯現(xiàn)的。現(xiàn)在的情況有沒(méi)有發(fā)生變化？

特倫斯·謝諾夫斯基：不，我們?nèi)匀皇侨祟?lèi)，這一點(diǎn)沒(méi)有改變。我相信各國(guó)最終會(huì)得出同樣的結(jié)論，因?yàn)槲覀兌枷Ｍ妫粫?huì)自毀去摧毀所有人。當(dāng)然，極端個(gè)體存在，但他們的威脅可能比人工智能更大。

關(guān)鍵就在于如何監(jiān)管它。我在書(shū)中舉了很多例子來(lái)說(shuō)明如何監(jiān)管技術(shù)，國(guó)際協(xié)議是一種方式，但我認(rèn)為自我監(jiān)管可能更有效，而這種自我監(jiān)管應(yīng)由科學(xué)家自身完成，而非政府。

例如，當(dāng)基因操控技術(shù)出現(xiàn)時(shí)，重組DNA帶來(lái)了潛在的生存威脅，因?yàn)槔碚撋希覀兛赡軇?chuàng)造出能毀滅所有生物的病毒。但分子生物學(xué)家在加州的阿斯利馬會(huì)議（Asilomar Conference）上聚集在一起，制定了實(shí)驗(yàn)約束方案。他們提出了三個(gè)層級(jí)的封閉措施，確保實(shí)驗(yàn)不會(huì)失控。自那以后，科學(xué)界普遍遵守這些規(guī)范，這在很大程度上防止了真正的災(zāi)難發(fā)生。

我認(rèn)為AI領(lǐng)域也需要類(lèi)似的做法。研究者應(yīng)保證科研不被完全阻礙，同時(shí)防止技術(shù)朝破壞性方向發(fā)展。我們才剛剛開(kāi)始意識(shí)到這一點(diǎn)。歷史告訴我們，真正的威脅通常不是眼下可以預(yù)見(jiàn)的，而是技術(shù)在投入使用后才顯現(xiàn)的意外后果。

舉個(gè)例子，互聯(lián)網(wǎng)剛出現(xiàn)時(shí)，人們認(rèn)為它會(huì)讓每個(gè)人都有發(fā)聲的機(jī)會(huì)，讓世界更民主、更美好。但現(xiàn)在社交媒體帶來(lái)的負(fù)面影響顯而易見(jiàn)，比如信息繭房。技術(shù)進(jìn)步總有風(fēng)險(xiǎn)與收益，我們必須愿意嘗試新的東西，同時(shí)接受可能出現(xiàn)的問(wèn)題，這是進(jìn)步的代價(jià)。

02 AI不會(huì)直接搶走你的工作

《知識(shí)分子》：回到這個(gè)行業(yè)，科技公司正在開(kāi)發(fā)一些非常有趣的產(chǎn)品，正如您書(shū)中提到的音樂(lè)生成和醫(yī)學(xué)方面的模型。那么，最近有沒(méi)有出現(xiàn)什么新的方向或應(yīng)用案例，讓您感到興奮？

特倫斯·謝諾夫斯基：AI應(yīng)用幾乎遍布各個(gè)領(lǐng)域，但科學(xué)領(lǐng)域可能是受益最大的。我在書(shū)的最后一章專(zhuān)門(mén)提到了一個(gè)過(guò)去幾乎不可能解決的問(wèn)題，蛋白質(zhì)折疊。DeepMind開(kāi)發(fā)的AlphaFold能夠依據(jù)氨基酸序列，預(yù)測(cè)蛋白質(zhì)分子的三維折疊結(jié)構(gòu)。這徹底改變了生物學(xué)，藥物設(shè)計(jì)、蛋白功能和進(jìn)化、突變研究，都進(jìn)入了一個(gè)全新的時(shí)代。

AI對(duì)醫(yī)學(xué)的影響涉及所有人，包括更好的診斷、更有效的藥物。在精神健康領(lǐng)域，焦慮、抑郁等患者非常需要幫助，但現(xiàn)有藥物效果有限，心理治療也難以普及。最近有研究讓患者各自接受1小時(shí)人類(lèi)治療師和1小時(shí)AI治療師的咨詢(xún)，然后自行選擇繼續(xù)哪一種。結(jié)果大多數(shù)人選擇了AI，這很出乎意料。原因有很多，首先，預(yù)約人類(lèi)精神科醫(yī)生往往要等上幾周，而AI隨時(shí)可用；其次，AI的費(fèi)用更便宜；更重要的是，患者覺(jué)得與AI交談更自在，因?yàn)锳I不會(huì)評(píng)判他們，可以毫無(wú)顧忌地談?wù)撁舾性?huà)題，而人類(lèi)醫(yī)生可能會(huì)有反應(yīng)或情緒。

類(lèi)似的情況在醫(yī)學(xué)中不斷出現(xiàn)，醫(yī)生借助AI也能提高診斷的準(zhǔn)確率。我認(rèn)為，AI不是替代，而是伙伴。醫(yī)生與AI協(xié)作，才能真正讓醫(yī)生更聰明。這種模式不僅在醫(yī)學(xué)，在各行各業(yè)也在上演。

《知識(shí)分子》：您提到了心理健康問(wèn)題，最近《紐約時(shí)報(bào)》發(fā)布了一篇報(bào)道，提到有青少年通過(guò)ChatGPT而不是人類(lèi)醫(yī)生來(lái)治療心理健康問(wèn)題，但最終自殺。您認(rèn)為，在涉及這方面問(wèn)題的時(shí)候，使用AI是否會(huì)存在風(fēng)險(xiǎn)，我們應(yīng)該需要更多的介入或者監(jiān)管措施嗎？

特倫斯·謝諾夫斯基：人工智能確實(shí)有很多缺陷，也需要監(jiān)管，但關(guān)鍵是要監(jiān)管對(duì)的部分。你提到的那篇報(bào)道，其實(shí)就是一個(gè)典型的“煽動(dòng)性（Rabble Rousing）”案例。在科學(xué)研究中，如果只看單一事件，是無(wú)法得出普遍結(jié)論的。在這個(gè)案例中，那個(gè)人可能本身就有嚴(yán)重的心理問(wèn)題，并不是因?yàn)榕cChatGPT對(duì)話(huà)才突然產(chǎn)生自殺的念頭。臨床抑郁癥非常難熬，患者往往無(wú)法正常生活，需要很多幫助，AI正在幫助這樣的患者。

這類(lèi)個(gè)案讓人心痛，但我們必須權(quán)衡風(fēng)險(xiǎn)和收益，這對(duì)任何藥物、療法上都適用。我們需要的是通過(guò)大規(guī)模的數(shù)據(jù)來(lái)系統(tǒng)化分析，僅憑一個(gè)人的情況無(wú)法得出結(jié)論，你不知道背后的原因。新聞往往只報(bào)道個(gè)別軼事，因?yàn)槟歉矍颍瑓s容易造成誤導(dǎo)。

這也是我寫(xiě)書(shū)的原因之一，我希望從內(nèi)部視角解釋AI的真實(shí)情況，而不是被零散的新聞帶偏。

另一個(gè)我反復(fù)看到的主題是“AI會(huì)搶走你的工作”。現(xiàn)實(shí)情況是，AI不會(huì)直接讓你失業(yè)，但會(huì)讓你的工作發(fā)生變化。為了保住崗位，你需要學(xué)習(xí)新技能、學(xué)會(huì)使用AI，讓它成為工具。如果拒絕學(xué)習(xí)，才可能被時(shí)代淘汰。歷史上，類(lèi)似的情況已經(jīng)發(fā)生過(guò)多次。新工作不斷被創(chuàng)造出來(lái)，作為舊工作的新版本，采用了更高效的方式來(lái)解決問(wèn)題。

《知識(shí)分子》：您書(shū)中所提到，大型科技公司正越來(lái)越多地參與到AI的基礎(chǔ)研究當(dāng)中。您如何評(píng)價(jià)這一趨勢(shì)？您是否擔(dān)心基礎(chǔ)研究可能會(huì)更多地受到行業(yè)邏輯的驅(qū)動(dòng)？

特倫斯·謝諾夫斯基：當(dāng)前的時(shí)代非常特殊。過(guò)去，基礎(chǔ)研究主要由政府資助，因?yàn)檎敢庵С珠L(zhǎng)期探索；而企業(yè)通常關(guān)注短期利益，需要不斷推出新產(chǎn)品向投資者交代，時(shí)間尺度往往只有幾年。

但現(xiàn)在情況發(fā)生了改變。像谷歌、微軟、亞馬遜、英偉達(dá)這樣的巨頭公司，憑借巨額利潤(rùn)和成熟的商業(yè)模式，開(kāi)始投入真正長(zhǎng)期的研究。他們不僅擁有雄厚的資金，從大學(xué)聘請(qǐng)了大量?jī)?yōu)秀研究人員，還能提供極為強(qiáng)大的算力資源，這對(duì)科研人員極具吸引力。

更重要的是，這些公司在一定程度上開(kāi)放了資源，讓學(xué)術(shù)界也能參與，比如DeepSeek就是行業(yè)開(kāi)源的領(lǐng)導(dǎo)者之一，幫助原本負(fù)擔(dān)不起的學(xué)者研究大語(yǔ)言模型。這非常讓人興奮，因?yàn)長(zhǎng)LM表現(xiàn)遠(yuǎn)超預(yù)期，但我們實(shí)際上并不了解這些模型的運(yùn)作機(jī)理。

目前，大公司內(nèi)部的研究主要圍繞自身的產(chǎn)品迭代，例如ChatGPT、Claude、Gemini等，而學(xué)術(shù)界的興趣在于揭示模型的原理。

只有真正理解其運(yùn)行機(jī)制，我們才能找到更優(yōu)的方法去改進(jìn)模型、解決現(xiàn)有問(wèn)題并讓它們更聰明。這需要數(shù)學(xué)理論，就像物理學(xué)家理解宇宙一樣，靠建立理論并通過(guò)實(shí)驗(yàn)檢驗(yàn)，而不僅僅是制造更大的機(jī)器。

正如我所說(shuō)的，目前許多AI相關(guān)的理論突破反而來(lái)自腦科學(xué)領(lǐng)域，而不只是工程團(tuán)隊(duì)。當(dāng)然，一些工程師在數(shù)學(xué)上也很強(qiáng)，但他們提出的問(wèn)題不一定能觸及本質(zhì)。

我們現(xiàn)在生活在三維空間，與擁有數(shù)十億乃至數(shù)萬(wàn)億個(gè)維度的世界是截然不同的。要知道，當(dāng)你在那個(gè)層面運(yùn)用數(shù)學(xué)知識(shí)時(shí)，那將會(huì)是一個(gè)完全不同的世界，而這就是我們正在探索的領(lǐng)域。

《知識(shí)分子》：AI的能耗問(wèn)題受到關(guān)注，其發(fā)展會(huì)不會(huì)受到能源的制約？

特倫斯·謝諾夫斯基：和其他技術(shù)一樣，AI隨著時(shí)間推移會(huì)變得越來(lái)越節(jié)能，我可以保證。

自然界早已解決了能耗問(wèn)題，人類(lèi)大腦只需約20瓦功率，卻能高效運(yùn)算。這得益于神經(jīng)元本身的結(jié)構(gòu)被高度優(yōu)化，使計(jì)算效率極高。我們可以借鑒這一原理設(shè)計(jì)芯片。

目前已經(jīng)有神經(jīng)形態(tài)芯片采用模擬處理（Analog Processing），而非傳統(tǒng)的數(shù)字處理。數(shù)字計(jì)算雖然功能強(qiáng)大，但能耗很高，而模擬芯片能在毫瓦級(jí)功耗下運(yùn)行。這樣的技術(shù)已經(jīng)存在，只需要針對(duì)產(chǎn)品進(jìn)行專(zhuān)門(mén)化，就可以應(yīng)用于各種邊緣設(shè)備，比如手機(jī)。很快，還會(huì)出現(xiàn)一整系列低功耗的AI眼鏡，也將采用這種技術(shù)。總之，未來(lái)的趨勢(shì)就是神經(jīng)形態(tài)工程，它將讓AI在能源效率上達(dá)到前所未有的水平。

03 AI的“殺手級(jí)應(yīng)用”，是教育

《知識(shí)分子》：AI的熱潮正在持續(xù)，NeurIPS會(huì)議是不是更加炙手可熱了？能否分享一些有意思的觀(guān)察？

特倫斯·謝諾夫斯基：NeurIPS最初于1987年創(chuàng)辦，是神經(jīng)網(wǎng)絡(luò)領(lǐng)域的學(xué)術(shù)會(huì)議，如今已經(jīng)走過(guò)了近38年。

神經(jīng)網(wǎng)絡(luò)在20世紀(jì)80年代受到歡迎，因?yàn)樗鼮锳I提供了一種區(qū)別于傳統(tǒng)邏輯和符號(hào)推理的新思路。隨著時(shí)間推移，各類(lèi)機(jī)器學(xué)習(xí)算法不斷涌現(xiàn)，NeurIPS逐漸發(fā)展成機(jī)器學(xué)習(xí)領(lǐng)域最重要的會(huì)議，大約10年前更是成為AI的頂級(jí)盛會(huì)。這種轉(zhuǎn)變每年都在發(fā)生，新的思想、新的解題方式層出不窮，但這個(gè)會(huì)議始終是AI的魔法之源（Magic Source）。

《知識(shí)分子》：最近幾年，提交給NeurIPS的論文數(shù)量顯著增加，一些年輕科學(xué)家對(duì)論文接收的結(jié)果產(chǎn)生焦慮，大量論文提交，會(huì)影響NeurIPS的接收率嗎？

特倫斯·謝諾夫斯基：過(guò)去十年來(lái)，NeurIPS 的論文接收率一直相對(duì)穩(wěn)定，大約維持在20%左右，我預(yù)計(jì)短期內(nèi)不會(huì)有太大變化。上一屆在溫哥華舉行的會(huì)議共有1.6萬(wàn)人現(xiàn)場(chǎng)參會(huì)，這個(gè)規(guī)模已經(jīng)受到會(huì)展中心容量的限制，最后甚至不得不通過(guò)抽簽決定部分參會(huì)名額，可見(jiàn)熱度之高。

NeurIPS的接收率確實(shí)不高，但這恰恰體現(xiàn)了會(huì)議的重要性和所展示研究的高水準(zhǔn)。這20%的比例適用于所有投稿者，不分國(guó)別。我自己也經(jīng)常向NeurIPS投稿，并不會(huì)受到特別的優(yōu)待。

《知識(shí)分子》：您覺(jué)得評(píng)審過(guò)程壓力更大了嗎？

特倫斯·謝諾夫斯基：評(píng)審最大的挑戰(zhàn)是找到足夠的評(píng)審人。如果有4000篇投稿，每篇3次評(píng)審，意味著1.2萬(wàn)次的評(píng)審總量，而我們不可能讓同一個(gè)人評(píng)太多篇。雖然整個(gè)領(lǐng)域在擴(kuò)展，但新增的主要是年輕研究者。

因此，我們現(xiàn)在也在思考如何評(píng)估評(píng)審的質(zhì)量，確保每份意見(jiàn)都可靠。會(huì)議的評(píng)審流程其實(shí)非常嚴(yán)格，作者在收到評(píng)審意見(jiàn)后，還有“rebuttal”環(huán)節(jié)，可以對(duì)問(wèn)題和誤解做出解釋?zhuān)c評(píng)審形成雙向交流。這個(gè)機(jī)制不僅有助于作者，也讓評(píng)審者本身在對(duì)話(huà)中獲得新的理解和成長(zhǎng)。

《知識(shí)分子》：您會(huì)擔(dān)心論文內(nèi)容會(huì)變得同質(zhì)化（Homogenous）嗎？

特倫斯·謝諾夫斯基：在任何學(xué)術(shù)會(huì)議上都可能會(huì)發(fā)生這樣的情況，一旦有新的主題、算法或者方法被提出，那么接下來(lái)的幾年里，很多論文都會(huì)圍繞它們展開(kāi)探索，因此在這個(gè)層面上，某些研究表現(xiàn)出來(lái)是同質(zhì)化的。

NeurIPS早期幾乎全是神經(jīng)網(wǎng)絡(luò)的論文，但這些研究來(lái)自統(tǒng)計(jì)學(xué)、數(shù)學(xué)、計(jì)算機(jī)科學(xué)、神經(jīng)科學(xué)、認(rèn)知科學(xué)、機(jī)器視覺(jué)、語(yǔ)音識(shí)別、語(yǔ)言等各個(gè)科學(xué)領(lǐng)域。這種跨學(xué)科的多樣性一直延續(xù)至今，也是NeurIPS會(huì)議的一大優(yōu)勢(shì)。

過(guò)去，支持向量機(jī)（SVM）、圖模型、貝葉斯網(wǎng)絡(luò)等都曾風(fēng)靡一時(shí)，如今神經(jīng)網(wǎng)絡(luò)又重新成為焦點(diǎn)，這也是一個(gè)頗為有趣且令人欣慰的趨勢(shì)。

神經(jīng)網(wǎng)絡(luò)模型受到大腦結(jié)構(gòu)的啟發(fā)，由大量小型處理單元組成，彼此高度連接，通過(guò)數(shù)據(jù)學(xué)習(xí)權(quán)重。當(dāng)然，這只是對(duì)人腦的粗略模擬，畢竟人腦經(jīng)歷了數(shù)百萬(wàn)年的進(jìn)化，遠(yuǎn)比這些模型復(fù)雜。

但正因如此，神經(jīng)科學(xué)的最新發(fā)現(xiàn)正在反過(guò)來(lái)影響下一代神經(jīng)網(wǎng)絡(luò)的設(shè)計(jì)，而AI的發(fā)展也為理解大腦提供了新的視角，我的研究正位于這一名為“NeuroArray”的全新領(lǐng)域。我相信，未來(lái)神經(jīng)科學(xué)與AI之間的交匯會(huì)產(chǎn)生重大突破。

《知識(shí)分子》：最后一個(gè)問(wèn)題，您還有什么信息或者想法希望傳達(dá)？

特倫斯·謝諾夫斯基：2018年，我在中國(guó)進(jìn)行我第一本書(shū)《深度學(xué)習(xí)》的巡回演講時(shí)，一位觀(guān)眾問(wèn)我，在所有的AI應(yīng)用中，哪一個(gè)會(huì)是“殺手級(jí)應(yīng)用（Killer APP）”。我之前從沒(méi)想過(guò)這個(gè)問(wèn)題，但我隨后意識(shí)到，最重要的應(yīng)用將是教育。

教育孩子最好的方式是通過(guò)與一個(gè)了解孩子的優(yōu)秀教育者，進(jìn)行一對(duì)一的互動(dòng)。這種方式非常昂貴，只有少數(shù)人能承擔(dān)得起。大多數(shù)學(xué)校的班級(jí)里都有20個(gè)以上的學(xué)生，而學(xué)生們的能力和知識(shí)水平各不相同。如果我們能創(chuàng)造出一個(gè)AI導(dǎo)師，為每個(gè)孩子量身定制教育內(nèi)容，那將極大地助益每個(gè)孩子的未來(lái)。