大模型界的硬剛英偉研芯頂流之一OpenAI,或將成為自主造芯潮的軟自新成員。
近日,硬剛英偉研芯pg娛樂電子游戲官網據媒體報道,軟自OpenAI正在探索制造自己的硬剛英偉研芯人工智能芯片,并已開始評估一個潛在的軟自收購目標。據知情人士透露,硬剛英偉研芯至少從去年開始,軟自該公司就討論了各種方案,硬剛英偉研芯以解決OpenAI所依賴的軟自昂貴AI芯片短缺的問題。這些選擇包括制造自己的硬剛英偉研芯人工智能芯片,與包括英偉達在內的軟自其他芯片制造商更密切的合作,以及在英偉達之外實現供應商多元化。硬剛英偉研芯
在OpenAI官網開放招聘的軟自崗位中,近日已經出現硬件工程師相關崗位,硬剛英偉研芯用以有評估和共同設計AI硬件。九月,OpenAI還從Meta招募了人工智能編譯器領域的牛人Andrew Tulloch,似乎也從側面印證著在自研芯片方面進行的投入。
苦英偉達久矣?
OpenAI布局自研芯片這件事,市場似乎并不感到意外。
大模型風靡的這大半年,如果說數據是pg娛樂電子游戲官網大模型的生產原料,那么算力則是大模型的生產力。此前,OpenAI公布過一組數據,大模型訓練所需算力的增速保持在3-4個月/倍速度增長,遠超摩爾定律18-24個月/倍。
強大的算力,意味著更快的數據處理速度、更強大的大模型服務能力。與此同時,伴隨著越來越多的企業入局大模型,導致對A100和H100等高端GPU的需求直線增加,英偉達及其制造伙伴臺積電,都在努力滿足供應。
據《金融時報》報道,今年8月,百度、字節跳動、騰訊和阿里巴巴向英偉達共訂購了價值50億美元的芯片。外部需求的爆發,導致了市場供貨異常緊張。據CoreWeave聯合創始人兼CTO Brian Venturo表示,今年一季度,獲取英偉達GPU還很容易,但從4月份開始訂購,交貨時間也要等到2024年Q1甚至Q2。
OpenAI的CEO Sam Altman也曾多次抱怨算力短缺問題,而這個市場主要由英偉達主導,該公司控制著全球80%以上最適合運行人工智能應用的芯片市場。
最近在倫敦聽證會上,Altman稱算力的短缺讓API可用性低于標準,并坦誠承認計算機芯片短缺,可能阻礙ChatGPT推出更大的“上下文窗口”。上下文窗口決定了模型的響應速度,和單次提示使用的數據。
財經評論員張雪峰表示,“OpenAI要自研芯片意味著他們希望獨立研發和生產適合其人工智能技術需求的定制化芯片。自研芯片可以使OpenAI更好地優化算法和硬件的協同工作,提升人工智能系統的性能和效率。同時,自研芯片還可以減少對供應商的依賴,降低成本并更好地滿足OpenAI獨特的需求?!?/p>
實際上,談算力問題始終離不開成本問題。分析師StacyRasgon曾估算算,ChatGPT每次查詢成本約4美分。若ChatGPT查詢增長到Google 搜索規模的十分之一,需要價值約481億美元的GPU,每年則需160億美元的芯片才能保持運行。
據外媒報道,2022年OpenAI營收2800萬美元,虧損為5.4億美元,虧損的主要算因就是算力開銷。另外,ChatGPT移動端9月收入雖增長至460萬美元,但增長疲態出現。根據市場情報公司Appfigures的最新數據,其營收增長已經開始放緩,7月份為31%,8月份為39%,9月份降至20%。
目前還不清楚OpenAI是否會推進定制芯片的計劃。但是張雪峰指出OpenAI自研芯片仍面臨著不同方面的挑戰:一是技術,自研芯片需要高度的技術實力和專業知識,OpenAI可能需要更多時間和資源來提升研發能力和相關技術。二是成本,自研芯片需要巨大的投入和研發成本,OpenAI可能需要評估其戰略利益,并權衡自研芯片帶來的長期收益。三是供應鏈,AI芯片市場競爭激烈,供應鏈短缺問題仍存在,這可能導致OpenAI推遲自研芯片計劃,以等待更好的市場時機。
集體自研芯片
OpenAI被爆自研芯片后,其合作伙伴微軟的芯片故事也有了“預告”。
10月6日,The Information援引知情人士消息稱,微軟計劃在下個月的年度開發者大會上推出首款為人工智能設計的芯片,來降低成本并減少對英偉達的依賴。報道稱,微軟芯片用于數據中心服務器,為訓練大語言模型(LLM)等軟件而設計,同時可支持推理,能為ChatGPT背后的所有AI軟件提供動力。
微軟的芯片研發工作從2019年就已經開始了,只是目前大家對相關信息知曉的少之又少。據The Information報道,這款芯片代號為“雅典娜”,將使用臺積電的5nm工藝打造。若成功投產,預計每顆芯片的成本降低三分之一。
除了微軟,其他大型科技企業也都開始邁入自研芯片的時代。早在今年5月18日,Facebook的母公司Meta披露了旗下數據中心項目支持AI工作的細節,提到已經打造一款定制芯片,簡稱MTIA,用于加快生成式AI模型的訓練。這是Meta首次推出AI定制芯片。Meta稱,MTIA是加快AI訓練和推理工作負載的芯片“家族”的一分子。
值得注意的是,谷歌、亞馬遜早已開啟自研芯片計劃。早在2013年,谷歌就已秘密研發一款專注于AI機器學習算法的芯片,并將其用在內部的云計算數據中心中,以取代英偉達的GPU。2016年5月,這款自研芯片公諸于世,即TPU。
亞馬遜則是最早涉足自研芯片的云廠商,2018年推出自研AI推理芯片Inferentia;今年年初專為人工智能打造的Inferentia 2發布,將計算性能提高了三倍,加速器總內存提高了四分之一,吞吐量提高了四分之一,延遲提高了十分之一。
知名研究公司Forrester Research的高級云計算分析師Tracy Woo表示,人工智能的繁榮正在給云計算供應商帶來更大壓力,迫使他們開發自己的芯片:你可以從英偉達購買,但當你看到谷歌和亞馬遜這些巨無霸時,會發現他們有資本設計自己的芯片。
目前微軟、谷歌等大廠紛紛下場自研芯片,天使投資人、資深人工智能專家郭濤認為核心原因是為了提高運算能力、減少對外部供應商的依賴、增強競爭優勢以及推動衍生設計等。
“金三角”不牢固了?
OpenAI和微軟自研芯片的消息一經爆出,其原因之一都指向“減少對英偉達的依賴”。
英偉達、OpenAI和微軟三家的故事,還要從2016年說起。當時成立僅一年的OpenAI遇到了英偉達CEO黃仁勛,并收獲了輕量化小型超算DGX-1,一年的計算量可以在靠其在一個月完成。三年后,OpenAI和微軟牽手,獲得10萬美元的投資。
彼時出錢的出錢、出力的出力、出基建的出基建,支撐著OpenAI大模型的研發。直到去年年底,ChatGPT的誕生,轟動全世界。三家的合作被放在聚光燈下,在業內被稱為“強強聯合”,但是隨著時間的推移,最大的贏家似乎一直是英偉達。
目前,英偉達占據全球數據中心AI加速市場82%的份額,而且以95%的市場占有率壟斷了全球Al訓練領域的市場,且公司市值超越1萬億美元。在8月底的財報會議上,英偉達CFO Colette Kres預計市場對于英偉達數據中心GPU的需求將延續至明年,“隨著我們縮短供貨周期并增加產能,未來幾個季度的供應將繼續增加?!?/p>
面對成本高、芯片的短缺的挑戰,OpenAI和微軟都開始自研芯片。消息一出,市場上除了關心芯片性能外,也有不少業內人士對三者的關系,產生了質疑:三者是否會繼續保持良好合作關系,亦或是出現“撕破臉”的局面。
另外,谷歌、微軟、OpenAI等作為英偉達的重要客戶,未來自研的芯片正式應用后,無疑會與英偉達直面競爭,因此業內也出現了“是否會撼動英偉達地位”的聲音。
“目前,英偉達人工智能芯片市場處于壟斷地位,但是隨著其他公司也開始自研芯片,這種局面可能會發生變化?!辈贿^,郭濤判斷英偉達在人工智能領域擁有豐富的經驗和技術優勢,芯片生態體系比較成熟,因此它仍然可能會保持其“霸主”地位。
而在張雪峰看來,英偉達作為AI芯片市場的領先企業,在AI芯片之戰仍將保持競爭優勢,但是競爭對手通過自研芯片能夠更好地滿足特定領域和應用的需求,有望推動市場多元化,其‘霸主’地位可能會面臨一定的沖擊。他表示“隨著更多企業,包括大廠和創業公司都意識到自研芯片的重要性,AI芯片之戰未來可能呈現多個參與者自研芯片的局面,市場的進一步發展,將取決于技術創新、應用需求和市場競爭力的綜合影響?!?/p>
綜合自財聯社、華爾街見聞、鳳凰網科技、界面新聞
下一篇:工商銀行原副行長張紅力被查,曾在辭職后任厚樸投資聯席主席
上一篇:拜仁發布國家德比海報:諾伊爾、薩內、羅伊斯出鏡