[新聞] 「HBM之父」:未來AI競爭看記憶體 未來3D架構決勝散熱與供電 中美會追趕上來
新聞標題:
「HBM之父」:未來AI競爭看記憶體 未來3D架構決勝散熱與供電 中美會追趕上來
新聞記者:
鉅亨網/記者 陳韋廷
新聞內容:
被韓媒譽為「HBM 之父」的韓國科學技術院 (KAIST) 教授金正浩 (Kim Jung-ho) 最新表
示,AI 的本質就是記憶體。
他在接受《東亞日報》專訪時提出上述顛覆性觀點時指出,過去業界過度聚焦模型算法與
GPU 算力,但當大模型實際運行時,注意力機制、上下文緩存 (KV Cache) 與推論生成
的每一個環節,都高度依賴記憶體系統的支撐。
金正浩表示,HBM 透過將多層 DRAM 垂直堆疊,大幅拓展資料傳輸的「車道數」,並生動
比喻稱「傳統記憶像 8 道高速公路,HBM 則是 1024,甚至 2048 車道,未來可能演進至
百萬車道」。
然而,頻寬的提升並未根除瓶頸。大模型在輸出瞬間需頻繁從 HBM 或未來的 HBF(高頻寬
閃存) 讀寫資料,導致 GPU 絕大部分時間處於「等待資料抵達」的閒置狀態。
金正浩估計,即便部署百萬個 GPU,真正用於計算的時間僅約 10%,即便透過演算法優化
,也很難超過 30%。
為解決「資料搬運」的能耗與延遲問題,金正浩預測未來 AI 運算將走向「以記憶體為中
心」。
他將理想的 3D 架構比喻為一棟百層大樓:「在一樓安裝 GPU,資料只需搭電梯下樓計算
,整棟樓解決所有事,省去長途奔波。」從 HBM4 開始,部分 GPU 功能將整合進記憶體
結構中。
金正浩還進一步描繪三層異質記憶體指出,速度最快的 HBM(堆疊 DRAM) 扮演百貨公司存
放熱數據,容量巨大的 HBF(堆疊 NAND) 如同公寓樓群存放冷數據,而他提出的 HBS(高
頻寬 SRAM) 則作為超低延遲的緩存。GPU/CPU 將置於頂層,專注於散熱與調度。
金正浩特別點出,輝達執行長黃仁勳近期頻繁訪韓,正因 GPU 微架構的效能成長已近停
滯,且高發熱特性使其難以像記憶體般大規模堆疊。
他認為,未來 3D AI 電腦的供電與散熱能力將成核心競爭力,決定企業生死。這也意味
著擁有 DRAM 與 NAND 雙重技術累積的三星與 SK 海力士,有機會在未來架構中佔據核心
地位。
不過,金正浩也警示,這並非簡單的「GPU 時代」切換為「記憶體時代」,而是 GPU、
HBM、先進封裝、網絡互連與散熱的系統級競賽。
面對中國業者積極自研 GPU/NPU 並帶動本土記憶體發展的追趕壓力,金正浩則對韓國業
界直言:「這是一場關係生存的長期競爭,只能努力活到最後。」
完整新聞連結:
https://news.cnyes.com/news/id/6528299
備註:
三星第二季都賺贏輝達了
HBM三大廠加起來賺不知道台積電的幾倍
整個DRAM產業營收已經贏過邏輯ic
CPU/GPU算再快沒有記憶體也沒用
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 39.10.64.205 (臺灣)
※ 文章網址: https://www.ptt.cc/bbs/Stock/M.1783766371.A.213.html
→
07/11 18:40,
1小時前
, 1F
07/11 18:40, 1F
→
07/11 18:40,
1小時前
, 2F
07/11 18:40, 2F
※ 編輯: robertgarcia (39.10.64.205 臺灣), 07/11/2026 18:40:56
推
07/11 18:42,
1小時前
, 3F
07/11 18:42, 3F
推
07/11 18:42,
1小時前
, 4F
07/11 18:42, 4F
噓
07/11 18:43,
1小時前
, 5F
07/11 18:43, 5F
※ 編輯: robertgarcia (39.10.64.205 臺灣), 07/11/2026 18:44:13
→
07/11 18:44,
1小時前
, 6F
07/11 18:44, 6F
推
07/11 18:45,
1小時前
, 7F
07/11 18:45, 7F
→
07/11 18:46,
1小時前
, 8F
07/11 18:46, 8F
→
07/11 18:46,
1小時前
, 9F
07/11 18:46, 9F
→
07/11 18:46,
1小時前
, 10F
07/11 18:46, 10F
→
07/11 18:47,
1小時前
, 11F
07/11 18:47, 11F
推
07/11 18:48,
1小時前
, 12F
07/11 18:48, 12F
推
07/11 18:50,
1小時前
, 13F
07/11 18:50, 13F
→
07/11 18:51,
1小時前
, 14F
07/11 18:51, 14F
→
07/11 18:53,
1小時前
, 15F
07/11 18:53, 15F
推
07/11 18:54,
1小時前
, 16F
07/11 18:54, 16F
噓
07/11 18:55,
1小時前
, 17F
07/11 18:55, 17F
推
07/11 18:56,
1小時前
, 18F
07/11 18:56, 18F
推
07/11 18:57,
1小時前
, 19F
07/11 18:57, 19F
→
07/11 18:59,
59分鐘前
, 20F
07/11 18:59, 20F
→
07/11 18:59,
59分鐘前
, 21F
07/11 18:59, 21F
→
07/11 19:00,
58分鐘前
, 22F
07/11 19:00, 22F
噓
07/11 19:00,
58分鐘前
, 23F
07/11 19:00, 23F
→
07/11 19:01,
57分鐘前
, 24F
07/11 19:01, 24F
→
07/11 19:01,
57分鐘前
, 25F
07/11 19:01, 25F
→
07/11 19:01,
57分鐘前
, 26F
07/11 19:01, 26F
→
07/11 19:01,
57分鐘前
, 27F
07/11 19:01, 27F
推
07/11 19:01,
57分鐘前
, 28F
07/11 19:01, 28F
推
07/11 19:02,
56分鐘前
, 29F
07/11 19:02, 29F
→
07/11 19:02,
56分鐘前
, 30F
07/11 19:02, 30F
推
07/11 19:04,
54分鐘前
, 31F
07/11 19:04, 31F
推
07/11 19:06,
52分鐘前
, 32F
07/11 19:06, 32F
→
07/11 19:07,
51分鐘前
, 33F
07/11 19:07, 33F
→
07/11 19:07,
51分鐘前
, 34F
07/11 19:07, 34F
推
07/11 19:08,
50分鐘前
, 35F
07/11 19:08, 35F
噓
07/11 19:10,
48分鐘前
, 36F
07/11 19:10, 36F
推
07/11 19:10,
48分鐘前
, 37F
07/11 19:10, 37F
→
07/11 19:10,
48分鐘前
, 38F
07/11 19:10, 38F
推
07/11 19:12,
46分鐘前
, 39F
07/11 19:12, 39F
→
07/11 19:12,
46分鐘前
, 40F
07/11 19:12, 40F
推
07/11 19:14,
44分鐘前
, 41F
07/11 19:14, 41F
推
07/11 19:19,
39分鐘前
, 42F
07/11 19:19, 42F
→
07/11 19:19,
39分鐘前
, 43F
07/11 19:19, 43F
推
07/11 19:20,
38分鐘前
, 44F
07/11 19:20, 44F
推
07/11 19:22,
36分鐘前
, 45F
07/11 19:22, 45F
→
07/11 19:23,
35分鐘前
, 46F
07/11 19:23, 46F
推
07/11 19:24,
34分鐘前
, 47F
07/11 19:24, 47F
→
07/11 19:25,
33分鐘前
, 48F
07/11 19:25, 48F
推
07/11 19:27,
31分鐘前
, 49F
07/11 19:27, 49F
推
07/11 19:29,
29分鐘前
, 50F
07/11 19:29, 50F
推
07/11 19:29,
29分鐘前
, 51F
07/11 19:29, 51F
推
07/11 19:29,
29分鐘前
, 52F
07/11 19:29, 52F
→
07/11 19:29,
29分鐘前
, 53F
07/11 19:29, 53F
推
07/11 19:33,
25分鐘前
, 54F
07/11 19:33, 54F
→
07/11 19:33,
25分鐘前
, 55F
07/11 19:33, 55F
推
07/11 19:33,
25分鐘前
, 56F
07/11 19:33, 56F
推
07/11 19:35,
23分鐘前
, 57F
07/11 19:35, 57F
→
07/11 19:36,
22分鐘前
, 58F
07/11 19:36, 58F
噓
07/11 19:37,
21分鐘前
, 59F
07/11 19:37, 59F
推
07/11 19:37,
21分鐘前
, 60F
07/11 19:37, 60F
推
07/11 19:37,
21分鐘前
, 61F
07/11 19:37, 61F
→
07/11 19:38,
20分鐘前
, 62F
07/11 19:38, 62F
噓
07/11 19:39,
19分鐘前
, 63F
07/11 19:39, 63F
推
07/11 19:40,
18分鐘前
, 64F
07/11 19:40, 64F
推
07/11 19:40,
18分鐘前
, 65F
07/11 19:40, 65F
→
07/11 19:40,
18分鐘前
, 66F
07/11 19:40, 66F
→
07/11 19:41,
17分鐘前
, 67F
07/11 19:41, 67F
推
07/11 19:45,
13分鐘前
, 68F
07/11 19:45, 68F
→
07/11 19:45,
13分鐘前
, 69F
07/11 19:45, 69F
→
07/11 19:46,
12分鐘前
, 70F
07/11 19:46, 70F
→
07/11 19:46,
12分鐘前
, 71F
07/11 19:46, 71F
→
07/11 19:47,
11分鐘前
, 72F
07/11 19:47, 72F
推
07/11 19:48,
10分鐘前
, 73F
07/11 19:48, 73F
Stock 近期熱門文章
74
236
14
182
PTT職涯區 即時熱門文章