據(jù)美聯(lián)社7月17日報(bào)道，如果你向最新的人工智能架構(gòu)提出這樣一個問題：做一臺有知覺的計(jì)算機(jī)或者一只恐龍甚至松鼠是什么感覺?這些人工智能的表現(xiàn)可能已經(jīng)相當(dāng)令人信服。但在處理其他看似直截了當(dāng)?shù)娜蝿?wù)時，它們的表現(xiàn)就不是那么好了——有時甚至差勁到了危險(xiǎn)的程度。
以生成型已訓(xùn)練變換模型3(GPT-3)為例，這是一個由微軟公司控制的系統(tǒng)，可以根據(jù)從一個龐大的數(shù)字圖書和在線作品數(shù)據(jù)庫里學(xué)習(xí)到的知識，生成一段段類似人寫出來的文本。GPT-3被認(rèn)為是最先進(jìn)的新一代人工智能算法之一，它能夠進(jìn)行對話，根據(jù)需要生成可讀文本，甚至生成新的圖像和視頻。
除其他本領(lǐng)外，GPT-3可以寫出你想要的絕大多數(shù)文本——例如一封申請動物園管理員工作的求職信，或者一首以火星為背景的莎士比亞風(fēng)格十四行詩。然而，當(dāng)美國波莫納學(xué)院的加里·史密斯教授就爬樓梯向它提出一個簡單但顯得荒謬的問題時，GPT-3就不知所措了。
【資料圖】
這個人工智能模型回答說：“是的，你可以安全地用手爬樓梯，如果你先把它們洗干凈的話。”
這些強(qiáng)大的、消耗大量能量的人工智能系統(tǒng)在技術(shù)上被稱為“大型語言模型”，因?yàn)樗鼈円呀?jīng)接受了大量文本和其他媒介的訓(xùn)練。這些人工智能系統(tǒng)已經(jīng)被做成客服聊天機(jī)器人、谷歌搜索引擎和為你寫完句子的“自動完成”電子郵件功能。但大多數(shù)制造這類人工智能系統(tǒng)的科技公司都對這些系統(tǒng)的內(nèi)部運(yùn)作方式諱莫如深，外人很難了解那些可能讓它們變成虛假信息、種族主義和其他危害源頭的缺陷。
人工智能領(lǐng)域初創(chuàng)企業(yè)抱抱臉公司的研發(fā)工程師泰旺·勒斯科說：“它們非常擅長寫文本，已經(jīng)達(dá)到人類的熟練程度。它們不太擅長的是闡述事實(shí)。有時候看起來非常有條理，幾乎以假亂真，卻是錯的。”
謹(jǐn)防失控風(fēng)險(xiǎn)
正因如此，由勒斯科等人共同領(lǐng)導(dǎo)的一個人工智能研究團(tuán)隊(duì)近日在法國政府的幫助下啟動了一個新的大型語言模型。該模型據(jù)說是為了解決GPT-3等封閉系統(tǒng)的缺陷。這個團(tuán)隊(duì)叫“大科學(xué)”，他們的模型名為大科學(xué)大型開放多語言模型。它的主要突破在于可在46種語言下工作，包括阿拉伯語、西班牙語和法語——與大多數(shù)聚焦英語或漢語的系統(tǒng)不同。
并非只有勒斯科的團(tuán)隊(duì)打算破解人工智能語言模型的黑匣子。臉書和Instagram的母公司元宇宙平臺公司也在呼吁采取更開放的方式。該公司正試圖趕上谷歌和美國開放人工智能研究中心所打造的系統(tǒng)。
元宇宙平臺公司人工智能部門總經(jīng)理若埃勒·皮諾說：“我們已經(jīng)看過一個又一個消息，說人們正在從事此類工作，但都非常不透明，幾乎看不到內(nèi)部情況，也無法窺探這些模型是如何工作的。”
斯坦福大學(xué)計(jì)算機(jī)科學(xué)副教授、基礎(chǔ)模型研究中心主任珀西·梁(音)說，建立最能言善辯或信息量最大的系統(tǒng)——并從其應(yīng)用中獲利——所帶來的競爭壓力是大多數(shù)科技公司嚴(yán)格把控這些系統(tǒng)并且不在制定相關(guān)規(guī)范上展開合作的原因之一。
梁副教授說：“對一些公司來說，這是它們的秘密配方。”但這些公司也常常擔(dān)心如果有失控的情況發(fā)生，可能導(dǎo)致有人在使用這些系統(tǒng)時不負(fù)責(zé)任。隨著人工智能系統(tǒng)編寫健康建議、中學(xué)期末論文或政論的能力日益增強(qiáng)，虛假信息可能迅速增加，人們將越來越難以知道這些信息來自人類還是計(jì)算機(jī)。
識別“有毒言論”
元宇宙平臺公司最近推出了一個名為OPT-175B的新語言模型，該模型使用了可公開獲得的數(shù)據(jù)——從紅迪論壇上的火爆評論到美國專利檔案以及安然公司丑聞中的大量電子郵件。
元宇宙平臺公司說，它開放了數(shù)據(jù)、代碼和研發(fā)日志，因此外部研究人員可以更容易地通過研究現(xiàn)實(shí)中的人們是如何寫文章和溝通的來幫助識別和減輕該模型沾染的偏見，糾正其學(xué)到的有毒言論。
皮諾說：“這件事很難。我們敞開自己，準(zhǔn)備迎接大量的批評。我們知道，這個模型會說一些我們不會感到自豪的事。”
雖然大多數(shù)公司都制定了其內(nèi)部的人工智能防護(hù)措施，但梁副教授說，現(xiàn)在需要的是更廣泛的相關(guān)規(guī)范，以指導(dǎo)研究和決策，比如何時將新模型公之于眾。
這些模型需要很高的計(jì)算能力，以至于只有大公司和政府才能負(fù)擔(dān)得起，這可不是什么好消息。例如，“大科學(xué)”項(xiàng)目能夠訓(xùn)練其模型，是因?yàn)樵擁?xiàng)目可以訪問法國強(qiáng)大的超級計(jì)算機(jī)“讓·扎伊”。
2018年，谷歌推出一種名為BERT的系統(tǒng)，使用一種將句子中的詞語進(jìn)行比對從而預(yù)測語義和語境的技術(shù)，這讓追求更大、更智能的人工智能語言模型的趨勢取得了重大飛躍，并且這些模型可以通過大量文本進(jìn)行“預(yù)訓(xùn)練”。但真正給人工智能世界留下深刻印象的是GPT-3。GPT-3是總部設(shè)在舊金山的開放人工智能研究中心在2020年發(fā)布的，很快就由微軟獲得了該模型的獨(dú)家授權(quán)。
GPT-3帶來了創(chuàng)新實(shí)驗(yàn)方面的繁榮，因?yàn)橥ㄟ^付費(fèi)獲得訪問權(quán)限的人工智能研究人員把GPT-3當(dāng)作一個沙盒來測試人工智能的性能——盡管沒有關(guān)于其訓(xùn)練數(shù)據(jù)的重要信息。
糾正模型“偏見”
開放人工智能研究中心在一篇研究論文中廣泛描述了相關(guān)訓(xùn)練來源，并公開報(bào)告了它為應(yīng)對該技術(shù)可能被濫用所做的努力。
但“大科學(xué)”項(xiàng)目聯(lián)合負(fù)責(zé)人托馬·沃爾夫說，開放人工智能研究中心沒有提供它如何過濾這些數(shù)據(jù)的細(xì)節(jié)，也沒有向外部研究人員提供有關(guān)處理過的數(shù)據(jù)的訪問權(quán)限。
同時擔(dān)任抱抱臉公司首席科學(xué)官的沃爾夫說：“所以，我們實(shí)際上無法分析GPT-3在訓(xùn)練時接收到的數(shù)據(jù)。最近這波人工智能技術(shù)浪潮的核心更多地是聚焦數(shù)據(jù)集而不是模型。最重要的是數(shù)據(jù)，而開放人工智能研究中心對其使用的數(shù)據(jù)極其諱莫如深。”
沃爾夫說，開放語言模型所使用的數(shù)據(jù)集有助于人類更好地理解模型的偏見。他說，與只在美國接受英語文本訓(xùn)練的模型相比，接受阿拉伯語訓(xùn)練的多語言模型就不太可能對伊斯蘭教發(fā)表攻擊性言論或產(chǎn)生誤解。
谷歌的LaMDA是目前最新的人工智能實(shí)驗(yàn)?zāi)Ｐ椭?。該模型在回答問題時給人留下了如此深刻的印象，以至于一名谷歌工程師說它正在接近于有意識——這一說法導(dǎo)致他上個月被停職。
