近日,OpenAI的聯(lián)合創(chuàng)始人Ilya Sutskever在神經(jīng)信息處理系統(tǒng)(NeurIPS)2024會(huì)議上發(fā)表了一項(xiàng)引人深思的演講。他大膽預(yù)測(cè),人工智能預(yù)訓(xùn)練的時(shí)代或?qū)⒂瓉?lái)終結(jié),并展望了AI超級(jí)智能的未來(lái)。
Sutskever在演講中指出,盡管硬件、軟件和機(jī)器學(xué)習(xí)算法的不斷進(jìn)步顯著提升了計(jì)算能力,但可用于AI模型訓(xùn)練的數(shù)據(jù)總量卻未能同步增長(zhǎng)。他將數(shù)據(jù)比作化石燃料,認(rèn)為這一資源并非取之不盡,用之不竭。他強(qiáng)調(diào):“我們只有一個(gè)互聯(lián)網(wǎng),數(shù)據(jù)以某種方式被創(chuàng)造并積累至今,現(xiàn)在已達(dá)到峰值,未來(lái)不會(huì)再有顯著增加。因此,我們必須更有效地利用現(xiàn)有數(shù)據(jù)?!?/p>
面對(duì)數(shù)據(jù)增長(zhǎng)的瓶頸,Sutskever預(yù)測(cè)了人工智能發(fā)展的三個(gè)新方向:代理AI、合成數(shù)據(jù)和推理時(shí)間計(jì)算。他相信,這些領(lǐng)域的發(fā)展將最終推動(dòng)超級(jí)人工智能的誕生。
其中,代理AI尤其引人注目。這類(lèi)AI超越了傳統(tǒng)聊天機(jī)器人的范疇,能夠自主決策,無(wú)需人工干預(yù)。隨著AI模因幣和大型語(yǔ)言模型(LLM)如Truth Terminal的興起,代理AI在加密領(lǐng)域已成為熱門(mén)話(huà)題。據(jù)悉,Truth Terminal在推廣一種名為Goatseus Maximus(GOAT)的模因幣后,市值一度飆升至10億美元,吸引了眾多散戶(hù)投資者和風(fēng)險(xiǎn)投資家的關(guān)注。
谷歌DeepMind人工智能實(shí)驗(yàn)室也推出了Gemini 2.0模型,為AI代理提供強(qiáng)大動(dòng)力。據(jù)谷歌介紹,基于Gemini 2.0框架構(gòu)建的代理將能夠勝任網(wǎng)站間協(xié)調(diào)、邏輯推理等復(fù)雜任務(wù),進(jìn)一步推動(dòng)代理AI的發(fā)展。
Sutskever認(rèn)為,代理AI的進(jìn)步將為人工智能擺脫數(shù)據(jù)幻覺(jué)奠定基礎(chǔ)。數(shù)據(jù)幻覺(jué)的出現(xiàn),往往源于錯(cuò)誤的數(shù)據(jù)集以及預(yù)訓(xùn)練過(guò)程中過(guò)度依賴(lài)舊LLM訓(xùn)練新LLM的做法,這會(huì)導(dǎo)致性能隨時(shí)間推移而下降。而能夠獨(dú)立行動(dòng)和推理的代理AI,將有望克服這一難題,開(kāi)啟人工智能發(fā)展的新篇章。
合成數(shù)據(jù)和推理時(shí)間計(jì)算也被視為人工智能未來(lái)發(fā)展的關(guān)鍵。合成數(shù)據(jù)技術(shù)能夠生成高質(zhì)量的訓(xùn)練數(shù)據(jù),從而彌補(bǔ)真實(shí)數(shù)據(jù)的不足;而推理時(shí)間計(jì)算則關(guān)注于提高AI模型在實(shí)際應(yīng)用中的推理速度和準(zhǔn)確性。
Sutskever的演講在人工智能領(lǐng)域引起了廣泛討論和深思。隨著技術(shù)的不斷進(jìn)步和數(shù)據(jù)的日益稀缺,如何更有效地利用現(xiàn)有資源,推動(dòng)人工智能向更高層次發(fā)展,將成為未來(lái)研究的重點(diǎn)。
同時(shí),代理AI的興起也為加密領(lǐng)域帶來(lái)了新的機(jī)遇和挑戰(zhàn)。如何確保AI代理的自主性和安全性,避免其被惡意利用或產(chǎn)生不良后果,將是加密領(lǐng)域需要面對(duì)的重要問(wèn)題。
總之,Ilya Sutskever的演講為人工智能的未來(lái)描繪了一幅充滿(mǎn)挑戰(zhàn)和希望的圖景。在這個(gè)數(shù)據(jù)稀缺的時(shí)代,如何突破瓶頸,推動(dòng)人工智能向更高層次發(fā)展,將需要全社會(huì)的共同努力和智慧。