特斯拉 10000 塊 H100 GPU 集群上線,加速 FSD V12 落地。擁有自家超算的和 H100 集群的特斯拉,正式入局算力軍備競賽!
根據(jù)特斯拉爆料人士 Sawyer Merritt 爆料,特斯拉將于美國時間本周一上線備受期待的,由 1 萬片 H100 組成的超級計算機。
這個 GPU 集群將用來訓(xùn)練包括特斯拉 FSD 自動駕駛系統(tǒng)在內(nèi)的各種 AI 應(yīng)用。
這個 GPU 集群由一萬個英偉達 H100 GPU 組成,能提供 340 FP64 PFLOPS 的峰值算力,為 AI 提供 39.58 INT8 ExaFLOPS 的峰值算力。
這個算力峰值超過了之前全世界排名第四的超算 Leonardo 所能提供的算力。
憑借這臺超級計算機,特斯拉可以迅速訓(xùn)練并更新它的全自動駕駛技術(shù)。
這個 H100 集群不僅讓特斯拉相比其他汽車制造商更具競爭力,而且將使特斯拉擁有夸張的算力儲備。
馬老板上個月甚至發(fā)推稱:「坦白說…… 如果英偉達能提供足夠的 GPU,我們可能就不需要 Dojo?!?/p>
特斯拉的算力儲備有什么用?
而且對于特斯拉來說,這個 H100 集群不單代表了無與倫比的算力,還使得擁有海量數(shù)據(jù)的特斯拉能將這些數(shù)據(jù)變現(xiàn)的能力。
特斯拉工程技術(shù)總監(jiān) Tim Zaman 發(fā)推稱,特斯拉上線的 H100 集群,將被用于訓(xùn)練視頻數(shù)據(jù)。
特斯拉擁有的訓(xùn)練數(shù)據(jù)集可能是全世界最大的,熱連接緩存大小超過了 200PB,這比大語言模型的數(shù)據(jù)規(guī)模要高幾個數(shù)量級!
同時他還稱,特斯拉是真正「物理上」擁有這些 GPU 集群和算力。很多其他的公司宣稱自己「擁有」多大算力時,其實他們只是能「租到」這些算力。
而對于目前的特斯拉來說,上線 H100 集群的意義就在于能夠極大地加快最新版 FSD V12 的上線速度。
馬斯克在兩個月之前稱,最新版的 FSD V12 版本更新將不再是「測試版」的自動駕駛技術(shù),暗示了這次更新可能真的能帶來完全體的自動駕駛技術(shù)。
而就在前幾天,馬斯克自己開著特斯拉來了一場全網(wǎng)關(guān)注的 FSD V12 的演示直播。直播中,新版的 FSD V12 展示出了「絲滑的自動駕駛性能」和出色的駕乘體驗。
FSD V12 背后的技術(shù)原理,就是將海量的優(yōu)秀司機駕駛的實時視頻,通過神經(jīng)網(wǎng)絡(luò)訓(xùn)練成一個全新的自動駕駛 AI 來駕駛汽車。
特斯拉上線這個 H100 集群后,將會大大加快 FSD V12 的訓(xùn)練速度,這也被上文中特斯拉工程總監(jiān)的帖子所證實。
馬斯克在推特上稱,V12 可能將在不到半年的時間內(nèi)更新上線!
而除了特斯拉 FSD V12 之外,特斯拉的人形機器人 Optimus 也將從特斯拉儲備的巨大算力中獲益。
網(wǎng)友分析到,因為智能機器人的工作原理,本質(zhì)上也是從視頻信號中去理解周圍的世界。這和自動駕駛的本質(zhì)是一樣的,只是形態(tài)和控制方式有區(qū)別。
特斯拉超算 Dojo 怎么樣了?
Tesla 上線 H100 GPU 集群的同時,也在激活自己研發(fā)制造的超算 Dojo。下圖是特斯拉內(nèi)部對 Dojo 計算能力的預(yù)測。
2024 年 10 月,Dojo 的計算能力也有望達到 100 exaflops。
在 2021 年的 AI Day 上,特斯拉第一次公布了自己超算 ——Dojo。
快兩年時間過去了,在今年 7 月推特科技爆料賬戶 Whole Mars Catalog 爆料 Dojo 已經(jīng)正式開始工作了。
這一消息也得到了馬斯克本人的點贊確認。
整個超算由這樣的計算模塊構(gòu)成:
每個模塊上有 25 個 Soc,模塊之間通過高速寬帶連接。
然后將模塊用主機盒固定起來,所有的接口都集成在了系統(tǒng)托盤上。
然后將兩個帶有主機組件的系統(tǒng)托盤安裝到一個 Dojo 機柜中。
頂部的圖例展示的是每個 Soc 的負載。
而現(xiàn)在,擁有 Dojo 和 1 萬塊 H100 集群的 Tesla,正式加入了算力軍備競賽當中。
參考資料:
廣告聲明:文內(nèi)含有的對外跳轉(zhuǎn)鏈接,用于傳遞更多信息,節(jié)省甄選時間,結(jié)果僅供參考,IT之家所有文章均包含本聲明。
鄭重聲明:此文內(nèi)容為本網(wǎng)站轉(zhuǎn)載企業(yè)宣傳資訊,目的在于傳播更多信息,與本站立場無關(guān)。僅供讀者參考,并請自行核實相關(guān)內(nèi)容。