扎克伯格喪失AI先發(fā)優(yōu)勢(shì)
鳳凰網(wǎng)科技訊《AI前哨》北京時(shí)間6月19日消息,在人工智能(AI)爭(zhēng)奪戰(zhàn)中,馬克·扎克伯格(Mark Zuckerberg)起了個(gè)大早,卻趕了個(gè)晚集?,F(xiàn)在,他正在做一件自己并不喜歡的事情:追趕。
(資料圖)
早在十年前,這位臉書(shū)創(chuàng)始人就看到了AI的前景,并砸下重金來(lái)推動(dòng)自家AI的開(kāi)發(fā)。他聘請(qǐng)了AI早期遠(yuǎn)見(jiàn)者之一、有“AI教父”之稱的楊立昆(Yann LeCun)來(lái)領(lǐng)導(dǎo)這項(xiàng)業(yè)務(wù)。然而現(xiàn)在,就在OpenAI的ChatGPT進(jìn)入消費(fèi)者市場(chǎng)幾個(gè)月后,Meta卻在相同的技術(shù)上落后了。
十年的先發(fā)優(yōu)勢(shì)
2013年,臉書(shū)(現(xiàn)在更名為Meta)開(kāi)始投資AI。扎克伯格和當(dāng)時(shí)的首席技術(shù)官邁克·施羅普夫(Mike Schroepfer)曾親自出面,尋求聘請(qǐng)一位AI領(lǐng)域的領(lǐng)軍人物,以領(lǐng)導(dǎo)公司的一個(gè)新研究部門,推進(jìn)AI的開(kāi)發(fā)。他們找到的這個(gè)副手是紐約大學(xué)教授楊立昆,后者在AI領(lǐng)域取得了享有盛譽(yù)的突破性成果。
楊立昆深入扎根于學(xué)術(shù)和基礎(chǔ)研究,力主創(chuàng)造一種能夠反映其優(yōu)先事項(xiàng)的文化:雇傭科學(xué)家而不是工程師,強(qiáng)調(diào)學(xué)術(shù)成果,例如研究論文,而不是為公司的最終用戶開(kāi)發(fā)產(chǎn)品。知情人士稱,多年來(lái),這一戰(zhàn)略使得Meta的基礎(chǔ)AI研究實(shí)驗(yàn)室對(duì)頂尖人才極具吸引力,但也挑戰(zhàn)了該公司將其技術(shù)成果進(jìn)行商業(yè)化的能力。
楊立昆反對(duì)開(kāi)發(fā)大模型
在研究方向和資源分配上,Meta鼓勵(lì)一種分散的、自下而上的方法。知情人士說(shuō),研究人員各自推動(dòng)自己的議程,在不同的方向上追求獨(dú)立的項(xiàng)目,而不是在全公司范圍內(nèi)制定一個(gè)統(tǒng)一的戰(zhàn)略。Meta將硬件資源拆分成多個(gè)小塊,分配到各個(gè)項(xiàng)目上。一些研究人員得到的計(jì)算機(jī)芯片超過(guò)他們需要的數(shù)量,他們會(huì)將這些芯片用于不必要的任務(wù),以避免放棄它們。
與此同時(shí),Meta在為其數(shù)據(jù)中心配備AI開(kāi)發(fā)所需的最強(qiáng)大計(jì)算機(jī)芯片方面進(jìn)展緩慢。即使公司獲得了更多的這種芯片,它也沒(méi)有一個(gè)好的機(jī)制把它們送到工程師和研究人員手中。一些人說(shuō),有時(shí)會(huì)有數(shù)千件令人垂涎的昂貴硬件閑置在那里。
Meta正在對(duì)其數(shù)據(jù)中心進(jìn)行全面改進(jìn),這可能造成了一些運(yùn)轉(zhuǎn)不暢。根據(jù)Meta的一篇博客文章,截至5月份,Meta最新AI超級(jí)計(jì)算機(jī)擁有1.6萬(wàn)個(gè)這樣的芯片。
內(nèi)部爭(zhēng)斗
知情人士稱,隨著大語(yǔ)言模型在2020年開(kāi)始展現(xiàn)出越來(lái)越強(qiáng)的能力,Meta AI研究部門內(nèi)部的緊張局勢(shì)也在加劇。兩個(gè)陣營(yíng)產(chǎn)生了分歧:一方敦促公司認(rèn)真投資大模型這個(gè)行業(yè)新方向,而包括楊立昆在內(nèi)的人則認(rèn)為這些大模型是短暫的狂熱,缺乏科學(xué)價(jià)值。一些人透露,楊立昆在公司內(nèi)部和公開(kāi)場(chǎng)合都強(qiáng)烈反對(duì)大語(yǔ)言模型,認(rèn)為他們不會(huì)讓AI更接近人類的智力水平,這使得持反對(duì)意見(jiàn)的研究人員很難獲得大模型開(kāi)發(fā)所需的支持和大量資源。
結(jié)果,一些Meta研究人員只能使用更少的資源繼續(xù)推進(jìn)大模型開(kāi)發(fā)。他們?cè)?022年使用大約1000個(gè)芯片開(kāi)發(fā)了一個(gè)名為“開(kāi)放式預(yù)訓(xùn)練模型”(OPT)的大語(yǔ)言模型,并在2023年使用大約2000個(gè)芯片開(kāi)發(fā)出了Meta的旗艦?zāi)P蚅LaMA。相比之下,按照行業(yè)標(biāo)準(zhǔn),開(kāi)發(fā)這種大模型需要5000到1萬(wàn)個(gè)芯片。最初,Meta允許有限的外部研究人員訪問(wèn)LLaMA,但隨后它被泄露到網(wǎng)上,引發(fā)了一陣創(chuàng)新熱潮。Meta高管們認(rèn)為,這是Meta志在分享其AI技術(shù)的一個(gè)主要例子。
自那以后,Meta失去了許多AI研究人員,這些人在去年從事了上述和其他關(guān)鍵的生成式AI項(xiàng)目。許多人感到筋疲力盡,或者對(duì)于Meta跟上競(jìng)爭(zhēng)對(duì)手的步伐缺乏信心。據(jù)領(lǐng)英資料和知情人士透露,在為L(zhǎng)LaMA撰寫(xiě)研究論文的14位作者中,有6位已經(jīng)離職或宣布將離職。在為OPT撰寫(xiě)論文的19位共同作者中,也有8位離開(kāi)了。
三分之一的Meta AI研究人員離職
在OpenAI去年11月發(fā)布ChatGPT之后,Meta員工的離職開(kāi)始加速。一些人受到了AI創(chuàng)業(yè)熱潮的誘惑離職,這股熱潮推動(dòng)了包括谷歌在內(nèi)的硅谷公司的全面人事變動(dòng)。領(lǐng)英的數(shù)據(jù)顯示,截至今年3月,領(lǐng)英上提到GPT的招聘崗位數(shù)量同比增長(zhǎng)了79%。
Meta的一位發(fā)言人表示,該公司一直在繼續(xù)招聘和引進(jìn)新的AI人才。
重新追趕
在ChatGPT發(fā)布后,扎克伯格、Meta首席產(chǎn)品官克里斯·考克斯(Chris Cox)、首席技術(shù)官安德魯·博斯沃思(Andrew Bosworth)一起負(fù)責(zé)公司所有與AI相關(guān)的工作。這三位高管現(xiàn)在每周花數(shù)個(gè)小時(shí)研究AI,參加會(huì)議并批準(zhǔn)AI項(xiàng)目。
此前,Meta花費(fèi)數(shù)年時(shí)間優(yōu)先考慮學(xué)術(shù)發(fā)現(xiàn),并免費(fèi)分享它們,但無(wú)法利用上這些研究成果的商業(yè)潛力?,F(xiàn)在,它正在迅速地將資源重新集中在開(kāi)發(fā)可用的AI產(chǎn)品和功能上,包括自己的聊天機(jī)器人。
扎克伯格重新布局AI
Meta新成立了生成式AI部門,專注于構(gòu)建可用的產(chǎn)品和工具,而不是科學(xué)研究。該部門收到了超過(guò)2000份內(nèi)部申請(qǐng),并迅速集結(jié)了來(lái)自不同團(tuán)隊(duì)的數(shù)百名員工。知情人士表示,硬件資源已從AI研究部門轉(zhuǎn)移,正被用于訓(xùn)練新的生成式AI模型。
扎克伯格在今年3月表示,“推進(jìn)AI并將其融入我們的每一款產(chǎn)品”是該公司最大的單筆投資。在今年5月舉行的Meta年度股東大會(huì)上,扎克伯格表示,公司也希望將AI擴(kuò)展到虛擬世界。
Meta發(fā)言人表示,在本月早些時(shí)候與員工舉行的一次市政廳會(huì)議上,扎克伯格宣布了該公司目前正在開(kāi)發(fā)的一系列生成式AI產(chǎn)品,包括Messenger和WhatsApp的AI代理,用戶可以根據(jù)文本提示生成并在聊天中分享的AI貼紙,以及一項(xiàng)照片生成功能。照片生成功能允許Instagram用戶使用文本提示修改自己的照片,然后在Instagram Stories中分享。
但是,Meta仍然面臨廣泛挑戰(zhàn)。知情人士透露,在經(jīng)過(guò)政府和媒體對(duì)其用戶隱私做法進(jìn)行了7年的嚴(yán)格審查之后,該公司對(duì)風(fēng)險(xiǎn)的容忍度越來(lái)越低,這在如何以及何時(shí)推出AI產(chǎn)品方面造成了摩擦。
否認(rèn)落后
今年5月,美國(guó)白宮舉行AI領(lǐng)袖峰會(huì),稱這是一場(chǎng)為“處于AI創(chuàng)新前沿的公司”舉行的會(huì)議。但是,扎克伯格沒(méi)有受邀。
Meta AI研究副總裁喬勒·皮諾(Joelle Pineau)在一份聲明中表示,公司在AI開(kāi)發(fā)方面并沒(méi)有落后,并為此前對(duì)AI學(xué)術(shù)研究和結(jié)構(gòu)的聚焦進(jìn)行了辯護(hù),稱這為Meta走向成功打下基礎(chǔ)。
皮諾稱,Meta的AI研究部門“是全球AI研究人員和開(kāi)放科學(xué)的領(lǐng)先目的地之一,僅在過(guò)去一年中,其研究成果就顯著增加”。她表示:“在我們把一類新的生成式AI體驗(yàn)帶給我們的應(yīng)用家族之際,我們的研究突破為此奠定了堅(jiān)實(shí)的基礎(chǔ)。我們?yōu)镸eta的AI研究人員過(guò)去和現(xiàn)在所做的貢獻(xiàn)感到自豪,他們幫助塑造了先進(jìn)和一流AI技術(shù)的未來(lái)。”鳳凰網(wǎng)科技《AI前哨》對(duì)此將持續(xù)關(guān)注。(作者/簫雨)
最近更新