【Computex 2023】以運算效能驅動 AI 未來 NVIDIA 推出一系列超級運算機器提供更多 AI 應用

隨著 OpenAI ChatGPT、微軟 Co-pilot、Google Bard 等大型語言模型人工智慧,以及各式各樣生成式 AI 在今年的爆發成長,在背後驅動運算的硬體架構,尤其是大型 GPU 組成的超算架構,更是在今年的 Computex 展前就引起相當大的話題.而 Computex 首日登場的 keynote 主題演講,便是由 NVIDIA 創辦人兼 CEO 總裁黃仁勳上台,以『i am ai』為起始點所打造的驅動 AI 世界的次世代 GPU 效能。而在這場 keynote 中,NVIDIA 也發表了從 GPU 加速架構的 HGX H100 到 Grace Hopper 超級晶片所打造出的 DGX GH200 人工智慧超級電腦,以及適用於各種不同行業別、可模組化打造的 MGX 模組化參考架構,讓更多 AI 模型能夠有適當且足夠的運算能力,開啟更多不可思議的應用。

【Computex 2023】以運算效能驅動 AI 未來 NVIDIA 推出一系列超級運算機器提供更多 AI 應用
今年 NVIDIA Computex Keynote 以『i am ai』為開場。

【Computex 2023】以運算效能驅動 AI 未來 NVIDIA 推出一系列超級運算機器提供更多 AI 應用
皮衣刀客,不,是 NVIDIA 創辦人暨執行長黃仁勳上台啦。

【Computex 2023】以運算效能驅動 AI 未來 NVIDIA 推出一系列超級運算機器提供更多 AI 應用
加速運算以及生成式 AI 可說是今年 NVIDIA 在高階硬體發展的兩大主軸。

【Computex 2023】以運算效能驅動 AI 未來 NVIDIA 推出一系列超級運算機器提供更多 AI 應用
NVIDIA 表示整體 AI 架構包括硬體、系統軟體,加速函式庫、平台到應用程式框架,都需要高度的整合與協作。

【Computex 2023】以運算效能驅動 AI 未來 NVIDIA 推出一系列超級運算機器提供更多 AI 應用
而 NVIDIA 在這部分就透過加速運算提供的強大效能,從開發者、終端使用者、硬體/雲端製造商到 AI 模型開發/加速,成就更良性的循環。

【Computex 2023】以運算效能驅動 AI 未來 NVIDIA 推出一系列超級運算機器提供更多 AI 應用
這些年透過 NVIDIA 加速運算效能所得到的成績。

【Computex 2023】以運算效能驅動 AI 未來 NVIDIA 推出一系列超級運算機器提供更多 AI 應用
既然提到加速運算,就要來過去比較一下,NVIDIA 列出了在目前能夠提供一組 LLM 進行模型運算的超算單元,需要 960 顆 CPU/11 GWh 的功耗才能達成。

【Computex 2023】以運算效能驅動 AI 未來 NVIDIA 推出一系列超級運算機器提供更多 AI 應用
而同樣的預算,改採用 GPU 架構伺服器後,就僅需要 48 顆 GPU/3.2 GHw 功耗,而且還可以執行 44 組 LLM 模型運算。

【Computex 2023】以運算效能驅動 AI 未來 NVIDIA 推出一系列超級運算機器提供更多 AI 應用
換成若是同樣的功耗,採用 GPU 架構可以打造出具有 172 顆 GPU 的運算系統,LLM 模型的運算數量則是達到 150 倍。

【Computex 2023】以運算效能驅動 AI 未來 NVIDIA 推出一系列超級運算機器提供更多 AI 應用
若是需要 1 組 LLM 模型的運算量,換成 GPU 架構的話只需要 2 顆 GPU 的伺服器就可達成,不僅花費更低.功耗更是僅有 0.1 GWh,對於未來更講求控制耗電量的資料中心來說,採用 GPU 架構更有優勢。

【Computex 2023】以運算效能驅動 AI 未來 NVIDIA 推出一系列超級運算機器提供更多 AI 應用
NVIDIA 創辦人暨執行長黃仁勳在簡報中所提到的資料中心的成本架構,除了建構的成本外,包括電力、生命週期、使用率等更是資料中心伺服器營運成本的重要因素。

接著就是 NVIDIA 開始秀肌肉的時候,首先登場的是對傳統 CPU 架構伺服器提供加速運算效能的 HGX 100.透過以高速互連技術整合最多 8 顆 GPU H100 Tensor 核心 GPU,並且最高提供 640 GB 的 GPU 記憶體和每秒 24 TB 的彙總記憶體頻寬,可達到最高 32 petaFLOPS 效能,成為世界上最強大的人工智慧與高效能運算可擴充加速伺服器平台。

【Computex 2023】以運算效能驅動 AI 未來 NVIDIA 推出一系列超級運算機器提供更多 AI 應用
NVIDIA HGX H100 伺服器。

【Computex 2023】以運算效能驅動 AI 未來 NVIDIA 推出一系列超級運算機器提供更多 AI 應用
NVIDIA 創辦人暨執行長黃仁勳在現場展示了 4 顆 GPU 單基板配置的 HGX H100。

【Computex 2023】以運算效能驅動 AI 未來 NVIDIA 推出一系列超級運算機器提供更多 AI 應用
不過光是 HGX H100 其實還不夠,NVIDIA 創辦人暨執行長黃仁勳在 Keynote 中再度強調目前正是人工智慧迎來爆發性成長的 iPhone 時刻,包括文字、語音、圖片、3D、影片、DNA、蛋白質、分子運算、動畫設計等應用,都會在生成式人工智慧的輔助下有更快速的進展,NVIDIA 也在會場 Demo 一連串的 AI 應用,包括文字轉歌曲、文字轉虛擬人像講話等,NVIDIA 創辦人暨執行長黃仁勳也在會場進行 Demo。

【Computex 2023】以運算效能驅動 AI 未來 NVIDIA 推出一系列超級運算機器提供更多 AI 應用
在 Google Text to Music 模組輸入以上指令,結果就是:



【Computex 2023】以運算效能驅動 AI 未來 NVIDIA 推出一系列超級運算機器提供更多 AI 應用
在 VoiceMod 的 Text to song 模組輸入以上指令,結果就是:



【Computex 2023】以運算效能驅動 AI 未來 NVIDIA 推出一系列超級運算機器提供更多 AI 應用
也可以在 SYNTHESIA 這個 Text to Actor 虛擬演員的模組輸入指令,輸出結果就會是這樣:




【Computex 2023】以運算效能驅動 AI 未來 NVIDIA 推出一系列超級運算機器提供更多 AI 應用
生成式人工智慧的出現,可說是繼 PC、Internet 網路、Mobile-雲端後,另一個運算世代的到來。

【Computex 2023】以運算效能驅動 AI 未來 NVIDIA 推出一系列超級運算機器提供更多 AI 應用
所以 NVIDIA 在這個時候,自家最強的 GH200 GRACE HOPPER 超級晶片也已經開始量產,作為驅動生成式 AI 的引擎,透過 72 顆 Arm 架構核心的 NVIDIA Grace CPU 搭配 H100 Tensor 核心 GPU 整合在一個模組內,提供 4 PetaFLOPS TE 的運算效能。

【Computex 2023】以運算效能驅動 AI 未來 NVIDIA 推出一系列超級運算機器提供更多 AI 應用
不管在 VectorDB、DLRM 深度學習建議模型或是 LLM 大型語言模型等,GRACE HOPPER 超級晶片比起 x86 CPU 架構,甚至是 x86 CPU+H100 架構,在生成式 AI 的效能表現上都有大幅度的成長。

【Computex 2023】以運算效能驅動 AI 未來 NVIDIA 推出一系列超級運算機器提供更多 AI 應用
而在 EDA、SDA 等領域,NVIDIA 也將跟這個業界的領導者 Cadence 合作,提供更好的加速運算模型。

【Computex 2023】以運算效能驅動 AI 未來 NVIDIA 推出一系列超級運算機器提供更多 AI 應用
而將 256 組 GRACE HOPPER 超級晶片透過 NVIDIA NVLink 網路技術彼此連接,NVIDIA 還打造出一台具備 1 exaflop 效能、144 TB 的共享記憶體設計的 DGX GH200。目前已經有 Google Cloud、Meta 與微軟等客戶採用,開發人員可以用它來開發用於生成式人工智慧聊天機器人的大型語言模型、用於推薦系統的複雜演算法,以及用於偵測詐欺及資料分析的繪圖神經網路。

【Computex 2023】以運算效能驅動 AI 未來 NVIDIA 推出一系列超級運算機器提供更多 AI 應用
至於針對規模沒那麼大的用戶,NVIDIA 則是推出 MGX 架構,透過模組化的設計來滿足各種不同規模需求的資料中心,系統製造商可以透過模組化的架構,使用通用架構及模組化的零組件來建構 CPU 架構和加速運算伺服器,適用各式氣冷式及液冷式機箱,並且支援 NVIDIA 的全線 GPU、CPU、資料處理單元(DPU)及網路卡,以及 x86 和 Arm 架構處理器,讓系統製造商能快速以成本效益的方式開發出百種以上的伺服器配置,以應對客戶不同的 AI 運算需求.雲達科技與美超微將率先在八月推出採用MGX設計的機型,另外包括永擎電子、華碩、技嘉與和碩聯合科技也將使用 MGX 來打造下一代加速運算電腦。
陳拔的粉絲團:https://www.facebook.com/ChenPaGadget
陳拔 wrote:
VectorDB(分子生物學的續列資料庫)


這裡的 VectorDB 不是分子生物學的續列資料庫喔
陳拔
感謝提醒
陳拔 wrote:
隨著 OpenAI ChatGPT...(恕刪)
感覺顯示卡上插CPU的步調又往前邁進了(誤~
                              彈幕濃!
其實intel也是在往這方面前進,CPU GPU NPU。
GH200 那個 576GB GPU RAM 總覺得有點唬人
http://kheresy.wordpress.com/
KHeresy
雖然說他的 CUDA 架構是可以讓 GPU 直接去 allocate 到,但是總覺得是硬把兩個加起來一起講…
陳拔
畢竟是 Keynote….
NVIDIA最近火的不得了
天網何時會產生?(笑
zzziippp wrote:
天網何時會產生?(笑
天網的計算能力只有 60 Tflop/s,買張 4090 就超過了 XD

ref: https://games.yahoo.com.tw/news/rtx-4090-skynet-061248152.html
http://kheresy.wordpress.com/
AI真的越來越強大了~
NVIDIA 真的越來越紅了~
關閉廣告
文章分享
評分
評分
複製連結

今日熱門文章 網友點擊推薦!