搞科研新姿勢：讓GPT-3給你打下手

作者：量子位 2023-03-09 08:15:56

那么小哥他們?yōu)槭裁赐话l(fā)奇想地要用這種方式搞科研呢？這是因為他們發(fā)現(xiàn)，對大型語料庫做深入的挖掘確實能得到一些有用的結(jié)果，但這個過程要是讓人類來搞，那簡直就太費時費力了。

本文經(jīng)AI新媒體量子位（公眾號 ID: QbitAI）授權(quán)轉(zhuǎn)載，轉(zhuǎn)載請聯(lián)系出處

搞科研的最新姿勢，被一位華人小哥解鎖了——

告訴AI你的研究目標(biāo)，再把數(shù)據(jù)集“投喂”進去，完事。

這就是來自伯克利的博士生Zhong Ruiqi等人的最新研究，把從海量數(shù)據(jù)集中繁瑣的“取證”過程，統(tǒng)統(tǒng)交給GPT-3來解決：

他們還發(fā)現(xiàn)，這種用AI搞科研的方法不僅效率高，而且還能得出人類沒有想到的“意外驚喜”。

讓GPT-3幫你搞科研

那么小哥他們?yōu)槭裁赐话l(fā)奇想地要用這種方式搞科研呢？

這是因為他們發(fā)現(xiàn)，對大型語料庫做深入的挖掘確實能得到一些有用的結(jié)果，但這個過程要是讓人類來搞，那簡直就太費時費力了。

因此，他們便決定把這個繁瑣的過程交給GPT-3來處理，并把這個任務(wù)命名為“D5”：

Goal Driven Discovery of Distributional Differences via Language Descriptions.

通過語言描述，實現(xiàn)目標(biāo)驅(qū)動的分布式差異的發(fā)現(xiàn)。

“D5”任務(wù)的過程，簡單來說就是兩個動作：

例如在上面這個案例中，小哥先是給AI輸進去了兩個語料庫：

然后再向AI確定自己的研究目標(biāo)，即“我想了解一下藥物A的副作用”。

在AI收到任務(wù)后，立刻開始執(zhí)行分析工作，最后得出了它的結(jié)論：

語料庫A中的樣本，有更多的患者會提到“妄想癥”（paranoia）。

不過試想一下，若讓人類科研人員做這項工作，光是了解語料庫A和B就需要花費大量的時間，更別提還得進一步做對比分析等工作了。

而D5任務(wù)之所以能夠做得如此絲滑，是因為小哥他們在此背后還做了不少工作。

例如構(gòu)建OpenD5元數(shù)據(jù)集，它包含符合D5任務(wù)的675個開放式問題，所涉及領(lǐng)域涵蓋商業(yè)、社會科學(xué)、人文科學(xué)、健康和機器學(xué)習(xí)等。

并且每個開放式問題都會對應(yīng)一個語料庫對兒（語料庫A和語料庫B），平均有17000個樣本。

小哥還把每個語料庫中的50%作為研究部分，另外50%則是拿來做驗證。

基于此，小哥他們再構(gòu)建了一個“D5系統(tǒng)”，它的工作原理和人類從數(shù)據(jù)庫中獲取發(fā)現(xiàn)類似，分為兩個階段，即創(chuàng)造性地提出一個假設(shè)，再在數(shù)據(jù)集上嚴格驗證這個假設(shè)。

按照這種思路，研究人員接下來用GPT-3做了次實驗。

他們先是向GPT3展示研究目標(biāo)和每個語料庫中的一些樣本，然后讓它提出一個假設(shè)列表。

最終實驗發(fā)現(xiàn)，GPT-3可以使用目標(biāo)描述來提出更相關(guān)、更新穎、更有意義的假設(shè)。

也正因為OpenD5數(shù)據(jù)集所涵蓋的領(lǐng)域眾多，因此小哥表示他們的D5系統(tǒng)具備應(yīng)用范圍廣的特點。

但對于這套D5系統(tǒng)，小哥也直言不諱地道出了它的缺陷。

例如，若是語料庫中含有較多的俚語、俗語或者帶有情緒的詞匯，那么AI所給出的“發(fā)現(xiàn)”就會存在偏差。

簡而言之，就是AI對于特定情況的詞匯或描述產(chǎn)生了錯誤的理解和分析。

除此之外，小哥也表示更靈活的語料庫、更具擴展性的系統(tǒng)，也是他們在未來重點研究的方向。

不過似乎這項研究讓小哥也是興奮不已，畢竟離他“構(gòu)建一個用AI稿科研”的夢想更近了一步。

參考鏈接：

責(zé)任編輯：武曉燕來源：量子位