《科創板日報》8月11日訊(記者 黃心怡) 據媒體報道,百度、字節跳動、騰訊和阿裏巴巴等互聯網巨頭正爭相收購英偉達的高性能芯片,已訂購了價值10億美元的A800處理器,這些訂單價值50億美元,將於今年交付。此外,這些公司還採購了40億美元的英偉達圖形處理器(GPU),將於2024年交付。
對此,《科創板日報》記者詢問百度、騰訊和阿裏巴巴方面,均未有回應。
不過,阿裏巴巴集團董事會主席兼CEO張勇在財報溝通會上坦言,GPU在中國市場供應確實緊缺。“新一代人工智能發展帶來的模型訓練和推理場景,對AI雲服務的需求非常旺盛,但是由於短期內GPU在中國市場供應的緊缺,使得這樣的需求只得到了部分滿足,AI相關服務所帶來的增量機會剛剛开始得到釋放。”
有大模型創業公司高層向《科創板日報》透露,”相比5月份英偉達芯片上漲了百分之小幾十,A100和H100都已經买不到了。”
一家算力服務平台的相關人員告訴《科創板日報》記者,當前算力資源較爲緊缺,有幾百家企業都在排隊。
未來推理算力需求或遠高於訓練算力
隨着AI大模型加速在實際場景落地,算力需求也隨之激增。
以AI應用“妙鴨相機”爲例,其上线不到一個月,算力需求暴漲數百倍。據相關負責人透露,“妙鴨相機”已在阿裏雲上進行緊急擴容,應對暴漲數百倍的算力需求。雖然算力一邊加,但另一邊用戶也在漲,但高峰期排隊現象已經有了緩解。
“此前,大家對大模型訓練需要的算力關注較多,尤其是GPT類的模型訓練,動輒需要上萬張顯卡。”某資深人士分析,隨着Llama2等开源大模型的流行,大模型應用推理端的算力需求更值得關注。隨着各個行業的AIGC开發逐步完成,對業務开展階段使用的推理算力需求开始大幅增長,未來幾個月推理的算力需求總量可能遠高於訓練算力。
優刻得董事長兼CEO季昕華認爲,未來對GPU的需求會繼續增長。“國產大模型的玩家越來越多,算力需求越來越高漲,同時大模型訓練的數量、數據和參數越來越大,也導致需求越來越多。其中,對推理算力的需求會更大。
“這是因爲推理和用戶數直接相關。目前,優刻得用於客戶訓練的GPU和推理的GPU的比例大概在3:7。假設三萬張卡做訓練的話,對應到七萬張卡做推理,這也是爲何ChatGPT會限制大家使用和注冊,就是因爲推理(的卡)不夠。” 季昕華說,“如今受限於整個供應鏈,全球缺貨。雖然我們能买,但是到貨時間會很難。此外,也受限於整個美國的政策,對A100和H100有限制。”
國產芯片相比英偉達仍有差距
當下,已有不少國內企業入局AI芯片,包括華爲昇騰、寒武紀、天數智芯、燧原科技、沐曦科技、壁仞科技等。
“國內真正已經參與大模型訓練的廠商,主要是華爲昇騰、寒武紀。”一位AI專家指出。“其他初創企業的痛點,主要是生態上不夠成熟,但在細分領域可以落地,比如,燧原科技在某些領域的加速表現不錯。”
另有大模型創業者對《科創板日報》記者表示,目前已經與昇騰、燧原等國產芯片進行適配。“雖然距離英偉達高端芯片還需要加油,華爲昇騰在國產芯片中已經很優秀了。”
一位相關芯片技術人員則向記者強調,昇騰芯片在某些深度學習的特定場景上性能已經趕上英偉達。
天數智芯相關負責人則對記者表示,其產品已成功支撐大模型訓練、推理,取得一定程度的突破。此外,在數據中心、能源、教育以及醫療等方面都有訂單,整體銷售額已經突破5億。
“國產芯片和英偉達的差距主要在於生態和通信性能。”季昕華指出,“現在大部分的人工智能方案都是基於英偉達的CUDA平台,國產芯片需要兼容CUDA架構,對生態要求還是比較高的。其次,在整個通信的性能上仍有挑战,推理今年能夠實現使用,但訓練方面還需要一點時間。不過進步非常快。我們現在也積極地與國產GPU對接,能讓他們用起來。”
文章來源:科創板日報
本文作者可以追加內容哦 !
鄭重聲明:本文版權歸原作者所有,轉載文章僅為傳播信息之目的,不構成任何投資建議,如有侵權行為,請第一時間聯絡我們修改或刪除,多謝。
標題:中國互聯網大廠加碼訂購!英偉達GPU繼續漲價 國產芯片仍缺生態加持
地址:https://www.breakthing.com/post/87454.html