《電子技術(shù)應用》
您所在的位置:首頁 > 人工智能 > 業(yè)界動態(tài) > Exacluster展示業(yè)界首批基于英偉達H200 GPU的AI集群

Exacluster展示業(yè)界首批基于英偉達H200 GPU的AI集群

2025-01-13
來源:芯智訊
關(guān)鍵詞: Exacluster AI集群 英偉達 H200 GPU

11.jpg

1月12日消息,基于生成式AI的搜索引擎技術(shù)初創(chuàng)公司ExaAILabs首席執(zhí)行官 Will Bryk于當?shù)貢r間周五宣布,該公司已經(jīng)部署了 Exacluster,這是業(yè)界首批基于英偉達(Nvidia)H200 GPU 的集群之一。該集群將用于構(gòu)建一個AI搜索引擎,號稱可以比谷歌(Google)搜索更好地理解用戶需求,并返回更好的搜索結(jié)果。

據(jù)介紹,Exacluster采用了 18 個基于 NVIDIA H200 的 8卡服務(wù)器(exa 表示 Quintillion,或 10^18),即擁有 144 個 H200 GPU,具有 20TB HBM3E 內(nèi)存(每個 GPU 141GB HBM3E),可提供 569958 TOPS(約 570 PetaTOPS)的組合計算性能。同時,該集群還集成了192 個 96 核CPU(共計 3456 個CPU內(nèi)核),并配備了 36TB 的 DDR5 內(nèi)存和 270TB 的 NVMe 固態(tài)存儲。該集群將被將用于訓練 ExaAI 的神經(jīng)網(wǎng)絡(luò),總體的功耗為 100kW。

該集群依然采用的是標準空氣冷卻方案,因此為了解決散熱問題,該集群當中的每個機架只安裝兩臺這樣的機器,以確保所有服務(wù)器都能得到足夠的冷卻。

據(jù)Will Bryk介紹,Exacluster的成本約為500萬美元,這也意味著其每臺服務(wù)器價格約為27.78萬美元。值得一提的是,英偉達也是ExaAILabs公司的主要投資者之一,此外Lightspeed 和 YCombinator也是其投資者。


Magazine.Subscription.jpg

本站內(nèi)容除特別聲明的原創(chuàng)文章之外,轉(zhuǎn)載內(nèi)容只為傳遞更多信息,并不代表本網(wǎng)站贊同其觀點。轉(zhuǎn)載的所有的文章、圖片、音/視頻文件等資料的版權(quán)歸版權(quán)所有權(quán)人所有。本站采用的非本站原創(chuàng)文章及圖片等內(nèi)容無法一一聯(lián)系確認版權(quán)者。如涉及作品內(nèi)容、版權(quán)和其它問題,請及時通過電子郵件或電話通知我們,以便迅速采取適當措施,避免給雙方造成不必要的經(jīng)濟損失。聯(lián)系電話:010-82306118;郵箱:aet@chinaaet.com。