“我這幾天,電話都快打爆了!绷钠鹱罱鸨鋈Φ腃hatGPT,英偉達中國區(qū)一位高管用略帶抱怨但難掩高興的語氣向《科創(chuàng)板日報》記者說道,其中邏輯在于,為ChatGPT供應(yīng)算力的核心基建——AI芯片,成為各廠商們投資的關(guān)鍵,“這幾天好多公司,包括云從科技(33.850, 1.05, 3.20%),都來找我安排調(diào)貨,根本就調(diào)不過來,需求特別大!
英偉達成最大贏家?
ChatGPT等AI應(yīng)用需要基于大量模型訓(xùn)練,它能如此睿智基于對天量數(shù)據(jù)的“吃透”,背后是強大算力的支撐,以GPT-3模型為例,其存儲知識的能力來源于1750億參數(shù),訓(xùn)練所需的算力高達3650PFLOPS-day。
中信建投(26.770, 0.05, 0.19%)研報的數(shù)據(jù)顯示,此前用于AI訓(xùn)練的算力增長符合摩爾定律,大約每20個月翻一番;深度學(xué)習(xí)的出現(xiàn)加速了性能的擴展,用于AI訓(xùn)練的算力大約每6個月翻一番;而目前大規(guī)模模型出現(xiàn),其訓(xùn)練算力是原來的10到100倍。
這也難怪OpenAI在大煉GPT-3之前,讓微軟花10億美元給自己獨家定制了一臺當(dāng)時全世界排名前五的超級計算機。ChatGPT在2月7日宣布由于滿負(fù)荷運行而暫停服務(wù),主要原因是網(wǎng)絡(luò)等資源的限制,且此前ChatGPT也出現(xiàn)多次宕機,這體現(xiàn)了AI應(yīng)用對算力的旺盛需求。
ChatGPT主要涉及AI自然語言處理相關(guān)技術(shù),底層算力芯片以高性能GPU為主。國內(nèi)一名人工智能公司高管告訴《科創(chuàng)板日報》記者,該類芯片中英偉達占據(jù)主要市場,英偉達的芯片為大模型訓(xùn)練做了很多優(yōu)化,“很好用”,它才是這次ChatGPT熱潮的最大贏家。
從芯片技術(shù)角度來看,鯤云科技創(chuàng)始人兼CEO牛昕宇告訴《科創(chuàng)板日報》記者,英偉達的CUDA架構(gòu)最初用于游戲GPU,相比于CPU更適用于大規(guī)模并行計算,基于其CUDA生態(tài),積累了完善的開發(fā)者生態(tài)。這一輪人工智能產(chǎn)業(yè)發(fā)展的初期,市面上沒有專門的AI加速芯片和硬件產(chǎn)品,開發(fā)者發(fā)現(xiàn)其產(chǎn)品可以應(yīng)用于AI的訓(xùn)練和推理過程,就多采用其產(chǎn)品。
另外,英偉達的產(chǎn)品在通用性和算力密度方面有優(yōu)勢,而且因為算法模型巨大,對系統(tǒng)級的多芯片互聯(lián)合作,高帶寬的網(wǎng)絡(luò)貯存要求以指數(shù)級的增長,英偉達對此早有布局,以收購和研發(fā)整合的手段,已形成完整成熟的解決方案。
在此番半導(dǎo)體產(chǎn)業(yè)下行周期下,英偉達成為跌跌不休半導(dǎo)體股中的“逆行者”。年初至今,該公司股票已經(jīng)漲超55%,反映了投資者在ChatGPT熱潮下對英偉達的看好。
就芯片采購問題,《科創(chuàng)板日報》記者以投資者身份致電云從科技,相關(guān)人士僅表示,公司和國產(chǎn)芯片公司有深度的適配,而且以前也有一些庫存,芯片這一塊不會受到國際芯片供應(yīng)量影響。
不僅要自主“大模型” 還要芯片技術(shù)彎道超車
目前,全球主要科技公司已經(jīng)相繼公布了各自在ChatGPT領(lǐng)域的進展,先且不論各家接下來投入程度高低以及這些類ChatGPT產(chǎn)品“錢”景如何,可以預(yù)見的是,手握關(guān)鍵底層芯片的公司們,無疑將從這次ChatGPT浪潮中受益。
浙商證券(10.500, 0.08, 0.77%)認(rèn)為,ChatGPT熱潮席卷全球、AIGC將產(chǎn)生巨大算力市場的背景下,芯片需求將迎來量價齊升。
不過,在產(chǎn)業(yè)界看來,ChatGPT從西太平洋(2.740, 0.01, 0.37%)興起,而后席卷至至大洋彼岸的中國,這給我國科技行業(yè)敲響警鐘。
海銀資本創(chuàng)始合伙人王煜全在2月7日發(fā)聲稱,中國不僅需要產(chǎn)生自主“大模型”,也應(yīng)當(dāng)在人工智能上進行芯片技術(shù)的“彎道超車”。
他認(rèn)為,今天非常主流的CPU、GPU芯片生態(tài),是美國政府和眾多歐美科技企業(yè)花了30多年時間逐步培育、發(fā)展起來的。這個領(lǐng)域,從最上游的指令集、芯片設(shè)計軟件,到下游制造需要的光刻機,都已經(jīng)有非常成熟的布局。除了表面上能看到的各種技術(shù)專利、行業(yè)標(biāo)準(zhǔn),還有大量沉淀在業(yè)內(nèi),很難快速傳播和復(fù)制的制造、生產(chǎn)經(jīng)驗,已經(jīng)形成了壁壘森嚴(yán)的體系。
“今天芯片產(chǎn)業(yè)面臨的問題不是科研問題,更不是資本運作的問題,而是在成熟的產(chǎn)業(yè)生態(tài)體系里,我們沒有占到核心關(guān)鍵點,更沒有核心掌控力。”王煜全稱。
具體到產(chǎn)業(yè),王煜全號召,系統(tǒng)芯片異構(gòu)計算時代,芯片企業(yè)、人工智能企業(yè)和產(chǎn)生大量數(shù)據(jù)的應(yīng)用企業(yè),這三方要深度合作,“這樣芯片的制造水平未必是最好,但芯片訓(xùn)練的模型是最好的”。
人工智能發(fā)展多年,近年間的商業(yè)化進程在加快,但“針對AI底層算力的研究更早!迸j坑罡嬖V記者,對ChatGPT這類大模型的訓(xùn)練,包括商業(yè)巨頭和頭部的研發(fā)機構(gòu)都有持續(xù)在投入,像國內(nèi)的百度、智源、華為、阿里等,其投入規(guī)模至今應(yīng)該超百億,主要是數(shù)據(jù)、硬件和人才的持續(xù)投入,可預(yù)知的是還有很長的路要走,大模型應(yīng)用正處于行業(yè)爆發(fā)的前夜,可以拭目以待。
芯片領(lǐng)域,“雖然英偉達占據(jù)先發(fā)優(yōu)勢,但其他的廠商也在迎頭趕上!迸j坑罘Q,像百度、寒武紀(jì)(87.500, 8.39, 10.61%)、燧原、壁仞、鯤云等都有高性能的AI算力產(chǎn)品推出,百度的paddlepaddle生態(tài)也在完善中,鯤云也通過多個垂直行業(yè)的規(guī)模落地積累了生態(tài)和應(yīng)用基礎(chǔ)。