閱讀筆記 / READING NOTE 這是根據美光(Micron)與 Meta 聯名發布的白皮書整理的圖文版——白皮書由美光主導、Meta 掛名共同作者並提供測試工具。原文:《LPDDR for General-Purpose and AI Workloads in Large-Scale Data Center Deployments》(Rev A,2026/07)+美光部落格〈When memory changes the equation〉(Khayam Anjam,2026/07/20)。首圖為美光官方產品照,數據圖為 SVG 繪製。 ← Learn
Micron × Meta 白皮書 · 資料中心記憶體

當記憶體改寫方程式
手機記憶體攻進AI 資料中心

伺服器跑得快不快,越來越常是記憶體說了算。

LPDDR(Low-Power DDR,低功耗記憶體)原本是手機和筆電用了十幾年的省電規格,從來沒人認真想過把它塞進資料中心。

現在美光(Micron,$MU)找上 Meta($META),兩邊聯手寫了一份白皮書,正式把這項「手機記憶體」推進伺服器機房。

買家已經用行動投票了。
Meta 大規模量產部署原生支援 LPDDR5X 的 NVIDIA($NVDA)Grace 晶片;
Microsoft($MSFT)正式確認資料中心架構要採用 LPDDR5X;
NVIDIA 計畫向供應鏈下達 200 億 Gb 的訂單。三個買家,不是一份行銷簡報。

報告裡最戲劇性的數字是「38.75」——這個數字背後的意涵是什麼呢?我們一起來拆解。

Micron SOCAMM2 記憶體模組官方產品照,黑色背景,模組正面特寫,可見金手指與晶片排列

圖:Micron 官方產品照,來源 Micron press image gallery

重點速覽

三句話講完這篇在幹嘛、為什麼該注意。

這是什麼

MicronMeta 一起掛名寫白皮書,拿 Meta 自己生產環境在用的測試工具(DCPerf),測兩款規格不同的 LPDDR5X 記憶體,能不能扛住資料中心的真實工作負載。

最重要的數字

容量差兩倍的兩款記憶體,跑資料倉儲查詢時速度差了 2.82~3.45 倍;拆到單一運算階段,最大差距衝到 38.75 倍。快的原因不是記憶體比較神,是「裝得下」跟「裝不下」的差別。

為什麼該注意

Meta 已經量產部署、Microsoft 已經確認採用、NVIDIA 計畫砸 200 億 Gb 訂單——需求方已經用真金白銀的訂單行動投票。對美光來說,這是 HBM 之外,還沒被大家盯上的第三條產品線。

01

手機記憶體,怎麼會跑進資料中心?

資料中心的記憶體圈,一直只有兩個選手在打:HBM 跟 DDR5。LPDDR 原本根本不在牌桌上。

HBM(High Bandwidth Memory,高頻寬記憶體)疊在 GPU 旁邊,專門服務 AI 訓練與推論——頻寬最高,但也最貴、最耗電,像是資料中心裡的超跑。

DDR5 RDIMM(Registered DIMM,伺服器標準記憶體模組)是資料中心 CPU 的標配,容量夠、可插拔、可維修,是用了幾十年的老規格。

LPDDR(Low-Power DDR)則是手機、筆電、平板用了十幾年的記憶體規格——設計目標從一開始就是「省電」,不是「插進資料中心」。

三者的定位差在哪?我們攤開來看清楚。

三種記憶體的相對頻寬定位(示意,非實測數值) ↑ 頻寬越高 HBM GPU 旁的超跑 最貴、也最耗電 DDR5 RDIMM 伺服器標配 容量夠、可插拔、可維修 LPDDR 省電選手 以前焊死,資料中心不能用

柱高代表三者「相對頻寬」的大致定位——HBM 最高、DDR5 居中、LPDDR 最低。

LPDDR 犧牲頻寬、換來省電。問題是,這個優勢以前資料中心用不上,原因就出在「焊死」(本節最後解釋)。

為什麼省電突然變成資料中心的剛需?

美光先前有一份分析算過一筆帳:同樣的存取情境下,LPDDR5X 的 DRAM 功耗只有 DDR5 的 23%~25%——換句話說,同一份記憶體工作量,LPDDR5X 省下接近四分之三的電。這個對比出自美光先前另一份自家分析《The role of low-power (LP) memory in data center workloads》,不是這篇白皮書的 SKU1/SKU2 主測試,要分開看。

DRAM 存取功耗(以 DDR5 = 1.00 為基準,數字越小越省電) DDR5 LPDDR5X 1R:1W(讀寫各一) DDR5 1.00 LPDDR5X 0.23 1R:0W(只讀) DDR5 1.00 LPDDR5X 0.25 Stream 2R:1W(串流讀寫) DDR5 1.00 LPDDR5X 0.23

三種存取情境(讀寫各半、只讀、串流讀寫)下,LPDDR5X 的 DRAM 功耗都落在 DDR5 的 23%~25%,接近省下四分之三。這份對比來自 Multichase(Google 開源的記憶體微基準測試工具)交叉驗證,是美光先前的分析,不是這篇白皮書 SKU1/SKU2 的主測試。

6.8%
用上 LPDDR5X 之後:Tensor Rebatching 期間,DRAM 只佔系統總功耗 6.8%(不到 7%)
≈4.3×
同一份工作換回 DDR5,DRAM 功耗約是 4.3 倍(1÷0.23)——依上圖比例換算,會吃掉系統功耗兩成以上。6.8% 是「已經換上 LPDDR」的結果

以前為什麼不能用?因為它是焊死的

省電是誘因,但以前沒人敢把 LPDDR 搬進資料中心,因為它有一個資料中心不能接受的毛病。

焊死(soldered)——手機、筆電裡的 LPDDR 是直接焊在主機板上的,不是插拔式模組。壞一顆,換的不是一根記憶體條,是整片主機板。

資料中心的維運邏輯完全相反:
記憶體必須能插、能抽、能單獨更換。
一台伺服器裡幾百 GB 記憶體只要死一顆,維運團隊要能在幾分鐘內換掉它,而不是拆整台機器重來。

這個「焊死」的毛病,直到 SOCAMM2 出現,才被真正解決。

02

SOCAMM2:把「焊死」變「可插拔」

SOCAMM2 是這篇故事真正的解鎖鍵。

SOCAMM2(Small Outline Compression Attached Memory Module,第二代小型化記憶體模組)是美光在 2026 年 3 月發表的規格——把 LPDDR5X 做成一片可插拔的模組,而不是焊死在板子上的晶片。

單一模組容量做到 256GB,靠的是業界第一顆單晶片(monolithic die)32Gb LPDDR5X 晶粒——一顆晶片就是 32Gb,不用堆疊封裝就能做出高容量。拿一台伺服器 CPU 常見的 8 記憶體通道規格來算,插滿 SOCAMM2 可以堆到單一 socket 2TB——這是以前焊死做法做不到的容量。

跟資料中心標配的 RDIMM 比,SOCAMM2 功耗只要三分之一、體積只要三分之一——省電的優勢,終於能用「插拔」的方式搬進資料中心。

焊死 Soldered 壞一顆,換整片主機板 可插拔 Socketed 壞一顆,換一根模組就好 SOCAMM2 解鎖

同樣是 LPDDR5X,差別只在封裝方式:焊死代表整片主機板綁在一起,壞一顆記憶體就要整片換掉;SOCAMM2 把它做成插拔模組,壞一顆只要抽換那一根——資料中心維運能接受的,是後者。

Micron SOCAMM2 記憶體模組側面白底官方產品照,可見金手指接腳與板上晶片
換個角度看實物——SOCAMM2 模組的側面白底特寫。它不是像傳統記憶體條「插」進插槽,而是名字裡說的壓接式(Compression Attached):貼平壓在主機板的接點上、用照片裡那幾個圓孔鎖緊固定——壞了就鬆開、換一片、鎖回去,維修邏輯跟換一根記憶體條一樣簡單。圖:Micron 官方產品照(來源

推論與效能提升(Micron PR,2026/03/03)

長上下文 LLM 推論的 time-to-first-token(首個字元回應時間)2.3 倍;純 CPU 應用每瓦效能提升 3 倍。每模組容量比前一代提升 1.33 倍

送樣進度

美光已對客戶送樣中,尚未量產出貨。白皮書結尾也預告下一步:LPDDR5X 要繼續往 9600 MT/s 衝——容量解決了,接下來拚的是速度。

03

測試設計:Meta 出題、美光應試

光有 SOCAMM2 這個「插座」還不夠,還要有人證明「插進去真的能用」。

這次不一樣的地方,是 Meta 直接掛名共同作者——四位 Meta 硬體系統工程師跟美光的記憶體團隊一起寫這份白皮書,使用的是 Meta 內部生產環境實際運行的測試工具。

這比純廠商自吹自擂的白皮書可信一級,但也要誠實講:主導測試設計、跑測試的還是美光,Meta 的角色是掛名共同作者、提供工具跟情境,不是獨立第三方認證。先看他們拿什麼測。

Tensor Rebatching

AI 資料管線的大量記憶體搬運工——把張量資料從一種批次格式重新打包成另一種,做的是 memcpy(記憶體複製)等級的粗活,對頻寬很敏感。

Deserialization

把序列化過的張量資料解析、重建回可以運算的格式——同樣是頻寬敏感的工作,跟 Tensor Rebatching 常常前後接在一起跑。

mediawiki_mem

模擬 Facebook 網頁伺服的負載(Tuned+MLP 兩種變體,外加 LambdaChase 注入記憶體壓力),掃過 36~288 個併發數,是延遲敏感的工作負載。

SparkBench

Spark / Spark SQL(開源大數據處理框架)的資料倉儲查詢——容量敏感,這篇報告最戲劇性的數字都從這裡來。

再交叉驗證用 DCPerf(Meta 開源的資料中心效能測試工具集)跑出來的結果,用 Multichase(Google 開源記憶體微基準測試工具)單獨測記憶體延遲跟頻寬,確保不是單一工具的誤差。

兩款記憶體,同一顆 CPU

白皮書比的不是「LPDDR vs DDR5」,而是LPDDR 對 LPDDR——同樣都是 LPDDR5X,但容量、速度、rank 配置不同的兩顆:SKU1 大而慢,SKU2 小而快。CPU 都是同一顆:72 核心/socket 的 Arm(安謀,$ARM)處理器。

規格SKU1(美光料號 62F8)SKU2(美光料號 62F4)
CPU72 核心/socket(Arm,白皮書未具名)同左
容量512GB/socket LPDDR5X(全機 1TB)256GB/socket(全機 512GB)
速度6400 MT/s(每秒百萬次傳輸);384 GB/s8533 MT/s;512 GB/s
Rank4-rank(疊更多晶片換容量,電氣負載重→跑不快)2-rank(疊少,電氣負載輕→跑得快)

rank 是什麼取捨?

rank(記憶體排)白話講就是同一個通道裡疊了幾組晶片——疊越多,容量做得越大,但電氣負載也越重,訊號跑不快;疊越少,訊號跑得快,但容量小。SKU1 疊 4-rank 換容量,SKU2 只疊 2-rank 換速度——這是同一種材料在容量跟速度之間的取捨,不是誰的技術比較好。

沒點名的平台,吻合 Grace 的規格

白皮書沒有點名測試平台的 CPU 型號,只寫「72 核心/socket 的 Arm 處理器」。這組規格剛好跟 Meta 已經量產部署的 NVIDIA Grace(72 核 Arm Neoverse V2、原生支援 LPDDR5X)完全吻合——但白皮書沒有明講,這是本文根據規格比對做出的推測,不是官方證實。

兩台機器只換一個變數:同一顆 CPU、同一套 Spark 設定,Spark worker 記憶體都配置成 276GB——唯一不同的是機器總記憶體容量跟通道速度。這樣量出來的差距,才乾淨地對應到「記憶體」這一個變數,不是被其他硬體差異汙染的數字。這是這次測試設計聰明的地方。
04

結果:速度組 vs 容量組

兩款記憶體,測出兩種完全不同量級的差距。

先看速度組——SKU2(8533 MT/s)比 SKU1(6400 MT/s)實測 DRAM 頻寬快 13%,反映到 Tensor Rebatching、mediawiki_mem 這類頻寬、延遲敏感的工作負載上。

+13%
SKU2 實測 DRAM 頻寬比 SKU1 快 13%(512 vs 384 GB/s)
+11%
Tensor Rebatching throughput 提升 11%,time-per-batch 減少 10%
~9%
mediawiki_mem(模擬 Facebook 網頁伺服)P99 尾延遲降低 12~20ms

Deserialization 這個工作負載也同步受惠:頻寬提升 6%,IPC(每時脈指令數)提升 18%。Multichase 交叉驗證也確認:SKU2 在所有 stride(存取跨距)下,loaded latency(負載下的存取延遲)都比 SKU1 低。

有個小但重要的但書:這次測試 mediawiki_mem 只開了 2 個 HHVM(Facebook 自家開發的 PHP 網頁程式執行引擎)實體,併發還沒摸到飽和——換句話說,SKU2 的優勢是在還沒吃緊的情況下量出來的,換算到更高執行緒數的真實部署,差距預期只會更明顯,不會縮小。

再看容量組——這才是整篇報告最戲劇性的部分。SparkBench 量的是 SKU1 相對 SKU2 的 speedup,數字越大代表容量小的 SKU2 輸得越慘。標準負載下,查詢吞吐量(QPH,每小時能完成幾次查詢)跟執行時間(Exec)都差了 2.82 倍;把資料量放大 3 倍,差距擴大到 3.45 倍。拆到每個運算階段(stage)看,差距更誇張。

標準負載:只有 Stage2 掉下懸崖——SKU1 相對 SKU2 的 speedup(倍數,越大=SKU2 罰得越重) 線性刻度上限 6× Stage1 0.96× Stage2 ⚠ 38.75× → shuffle 資料量超過 DRAM 容量,溢寫到硬碟(下圖細講) Stage3 2.07× Overall (QPH/Exec) 2.82×

Stage2 的 38.75 倍超出這張圖的線性刻度上限(6×),用斷軸處理:長條在刻度上限處被截斷再接續延伸,長度不代表真實比例,但標籤上的 38.75× 是白皮書實測的真實數字。

資料量放大 3 倍:懸崖擴散——每個階段從「標準」走到「3x」 標準負載 3x 負載 刻度上限 6× Stage1 0.96× 5.96× → page cache 裝不下,原本安全的階段也失守 Stage2 38.75×(刻度外) 4.25× → 相對差距收斂,但 SKU2 仍慢 4.25 倍 Stage3 2.07× 3.21× Overall (QPH/Exec) 2.82× 3.45×

箭頭由「標準負載」的空心點指向「3x 負載」的實測值——一眼看出誰惡化(紅)、誰收斂(青)。

把資料量放大 3 倍後,連原本沒問題的 Stage1 也開始吃緊——差距從打平(0.96×)擴大到 5.96×,因為 page cache(頁面快取,作業系統暫存最近讀過的硬碟資料的記憶體區塊)裝不下整份資料,每次掃描都要重新從硬碟讀一次。

全篇最重要的一張圖:記憶體不夠時,會掉下的懸崖

Stage2 差了 38.75 倍,不是打字錯誤,是這個階段的 shuffle(洗牌/資料重分配,Spark 查詢裡把資料在不同運算節點間重新分配對齊的步驟)把資料量沖過了 DRAM 的容量上限,一部分資料被迫溢寫到硬碟(spill-to-disk),從奈秒級的記憶體存取,掉成微秒到毫秒級的硬碟存取。

存取速度 記憶體容量上限 資料量超過這條線,就掉下去 裝得下 → 全程留在 DRAM 奈秒級存取,全速前進 Stage1 標準負載:0.96×,幾乎打平 慢 38.75× 從奈秒級掉到微秒~毫秒級 裝不下 → 溢寫到硬碟 Stage2 標準負載實測(shuffle 階段) 微秒~毫秒級存取

想像你在整理一整桌的文件——桌面(記憶體)夠大,可以整份攤開,伸手就拿到需要的頁面;桌面不夠大,你就得不斷起身走到檔案櫃(硬碟)前翻找、拿回來、再放回去。慢的不是你的手腳,是每一次都要多走那一趟路——SOCAMM2 的貢獻,就是讓資料中心第一次能把 LPDDR 這張「桌子」做得夠大,而不是換一套更神奇的記憶體。

05

誠實地說:這份報告能與不能告訴你什麼

在把這篇讀成「LPDDR 要顛覆資料中心」之前,先劃清楚四條線。

1. 美光測美光,但 Meta 掛名共同作者

這是廠商 benchmark,美光主導測試設計與執行;但 Meta 掛名共同作者、用的是自己生產環境的測試工具(DCPerf),比純廠商白皮書可信一級,不是獨立第三方認證。

2. 主對比是 LPDDR 對 LPDDR

SKU1 對 SKU2 比的是容量與速度的取捨,不是 LPDDR 對 DDR5 整機對決。前面那組「省下 75% 功耗」的數字,來自美光先前另一份自家分析,不是這篇白皮書的主測試。

3. 38.75 倍不是 LPDDR 的魔法

是「記憶體不夠,掉到硬碟」的懸崖效應——任何夠大的記憶體都能避免。SOCAMM2 的真正貢獻,是讓 LPDDR「裝得夠大」變成可能,以前焊死的做法做不到這件事。

4. 兩個敘事可以同時為真

AI、agentic 應用讓伺服器的瓶頸從 CPU 移向記憶體與儲存,這是美光的 thesis,也是他們的產品 pitch。兩者不衝突——一家公司完全可以同時說中趨勢,又靠這個趨勢賣東西。

沒有最好的記憶體,只有配得上你工作負載的記憶體

整份報告最實用的結論,其實是一張決策樹:先問自己的 workload 卡在哪一關,再決定要買容量還是買速度。

你的 workload,卡在哪一關? 卡容量——資料倉儲、大型 dataset 選大容量記憶體 像 SKU1:512GB/socket,優先堆容量 卡頻寬延遲——AI 資料管線、網頁伺服 選高速記憶體 像 SKU2:8533 MT/s,rank 少訊號快

真 takeaway 分兩層:容量夠不夠是 38× 級的變數,速度快 13% 只是 11% 級的變數——先買夠,再買快。而「夠不夠、快不快」永遠要對照自己的 workload,沒有一款記憶體同時是兩邊的最優解。

06

為什麼該注意(投資角度)

白皮書是一回事,買家真金白銀的訂單是另一回事——後者更值得看。

拉遠來看,這篇白皮書真正想回答的問題,是「LPDDR 進資料中心,到底是不是真需求」。答案已經寫在買家的行動裡。

Meta × NVIDIA Grace:量產部署,不是概念驗證

The Register(2026/02/17)報導:Meta 完成首個大規模 Grace-only 量產部署,部分 CPU 工作負載每瓦效能最高快 2 倍,跑的是不需要 GPU 的 GPC(General Purpose Computing,通用運算)agentic AI(能自主連續執行多步驟任務的 AI 應用)工作負載。Grace 是 72 核 Arm Neoverse(Arm 專門設計給伺服器 CPU 用的核心架構) V2,原生支援 LPDDR5X——跟白皮書測試平台的規格吻合。Meta 的 Arm 化也不只 NVIDIA 一條路:Arm AGI CPU(136 核、台積電 3nm,Meta 是首發客戶,2026 下半年量產)、高通 Qualcomm($QCOM)與 Meta 的資料中心 CPU 多世代合作協議(2026/06)都已經簽下去。

Microsoft 確認、NVIDIA 下訂單

Microsoft($MSFT)已正式確認要在資料中心架構部署 LPDDR5X。NVIDIA 計畫向供應鏈下總量 200 億 Gb 的 SOCAMM 訂單——這不是白皮書的推測,是採購行為。

SOCAMM 三雄戰局:容量領先 ≠ 訂單份額領先

TrendForce(2026/03/04):三星(韓國・005930)已送樣 NVIDIA、SK 海力士(韓國・000660)開發原型中;供應鏈消息指三星拿下約 100 億 Gb 訂單、SK 海力士拿剩餘的 60%~70%、美光拿其餘。美光雖然規格上第一個推出 256GB 單模組,但在這輪訂單分配裡不是拿最多的那家——容量技術領先跟訂單份額領先,是兩件事。

美光($MU)的第三條線

2026 年 6 月的 FQ3 財報電話會議:單季營收 $41.46B(優於預期 16%),data center 營收 $25B,約占六成;管理層預期 HBM TAM 將提前在 2027 年突破 $1,000 億(原估 2028 年)。對美光來說,HBM 是大家都盯著的主線,DDR5+NVMe(見「AI Agent 的第二戰場」篇)是第二條線,LPDDR/SOCAMM2 是還沒被大家盯上的第三條線

LPDDR 模組在 AI 伺服器裡「2026 之後才會真正放量」——這是 TrendForce 自己的判斷。換句話說,這篇是早期訊號頁,不是已經兌現的故事:買家已經行動,但規模還沒起來。值得放進追蹤清單,不代表現在就該下結論。
07

名詞小抄

這篇的關鍵詞,一句話版。

DCPerf
Meta 開源的資料中心效能測試工具集(github.com/facebookresearch/DCPerf),這篇白皮書用它模擬真實 workload。
MT/s Mega-Transfers per second
記憶體傳輸速度的計量單位,每秒百萬次資料傳輸,數字越大代表理論頻寬越高。
rank 記憶體排
同一個通道裡疊了幾組晶片。疊越多容量越大但電氣負載越重,訊號跑不快;疊越少訊號快但容量小。
P99 尾延遲 tail latency
100 次請求裡最慢的那 1 次的延遲,比平均值更能反映使用者實際感受到的「最壞情況」等待時間。
Spark / Spark SQL
開源的大數據處理框架,常用來跑資料倉儲的 SQL 查詢,這篇拿它的查詢效能測記憶體容量夠不夠。
shuffle 洗牌/資料重分配
Spark 查詢裡把資料在不同運算節點間重新分配、對齊的步驟,通常是整個查詢裡最吃記憶體的階段。
page cache 頁面快取
作業系統拿一部分記憶體暫存最近讀過的硬碟資料,下次讀同一批資料時不用再等硬碟。
spill-to-disk 溢寫到硬碟
記憶體裝不下運算中的資料時,系統被迫把部分資料寫到硬碟騰出空間,之後又得讀回來,速度從奈秒級掉到微秒~毫秒級。
IPC Instructions Per Cycle
每個時脈週期能執行幾條指令,數字越高代表 CPU 每一拍做的事越多。
RDIMM Registered DIMM
資料中心伺服器標準的可插拔記憶體模組,幾十年來的老規格,容量夠、可維修。
Multichase
Google 開源的記憶體微基準測試工具(github.com/google/multichase),專門量測記憶體延遲與頻寬。
GPC General Purpose Computing
通用運算,泛指不需要 GPU 加速、CPU 就能處理的一般運算任務。
monolithic die 單晶片
一整顆晶片做出全部容量,不用把好幾顆小晶片疊在一起封裝,是 SOCAMM2 做到 256GB 的關鍵技術。
Neoverse Arm 伺服器核心 IP
Arm($ARM)專門設計給伺服器 CPU 用的核心架構,NVIDIA Grace 等資料中心 Arm 晶片都拿它當基礎打造。
返回 Learn,看更多圖文好讀版
來源:
  1. Micron × Meta 白皮書《LPDDR for General-Purpose and AI Workloads in Large-Scale Data Center Deployments》(Rev A,2026/07)+美光部落格〈When memory changes the equation〉,Khayam Anjam,2026/07/20
  2. Micron 新聞稿(GlobeNewswire,2026/03/03):全球首款 256GB LPDRAM 模組
  3. TrendForce(2026/03/04):SOCAMM 供應鏈競局
  4. The Register(2026/02/17):Meta NVIDIA Grace 量產部署
  5. 美光 FQ3 2026 財報電話會議(2026/06,經 Investing.com 逐字稿)
  6. github.com/facebookresearch/DCPerf · github.com/google/multichase
中文圖文整理:Jazz Lien · 首圖為 Micron 官方產品照,數據圖為 SVG 繪製