资讯
天价内存把大厂逼成垃圾佬!拆退役服务器抠DDR4用
📋总体概括
快科技9月3日报道,谷歌供应链高级总监Nikhil Cherian透露,AI行业已从算力受限转向内存受限,高性能内存约占单台AI服务器物料成本的75%。为此谷歌在硬件上建立内部回收供应链,拆解退役服务器回收DDR4模组,并设计转接器让本应使用DDR5的新AI服务器降级兼容DDR4;软件端则通过优化底层函数库、模型架构和KV Cache压缩来降低内存消耗,并推出TPU8t/TPU8i两款ASIC,其中TPU8i配288GB HBM3e、8.6TB/s带宽及384MB片上SRAM。这一罕见举措凸显DRAM供应紧张已到影响AI基建扩张的程度。
⚡关键信息
- ▸谷歌高管称AI行业已从算力受限转向内存受限,高性能内存约占单台AI服务器物料成本的75%
- ▸谷歌建立内部回收供应链,拆解退役服务器回收DDR4内存,并专门设计硬件转接器
- ▸本应使用DDR5的新AI服务器在部分情况下被迫降级使用回收的DDR4
- ▸软件端谷歌通过优化底层函数库、模型架构和KV Cache压缩技术降低单位算力内存消耗
- ▸谷歌今年推出TPU8t(训练)和TPU8i(推理),后者配288GB HBM3e、8.6TB/s带宽和384MB片上SRAM
🔥犀利点评
巨头下场当「垃圾佬」拆旧服务器抠内存,比任何涨价报告都更直白地宣告:内存才是AI真正的咽喉。算力堆不动、内存吃不饱,75%的物料成本占比说明这场军备竞赛的钱正在被存储环节虹吸。降级用DDR4看似寒酸,实则是理性止损——HBM产能被英伟达等吃干抹净,谷歌只能自谋出路。真正的赢家是三星、SK海力士和美光,而靠捡旧件续命的AI扩张,能撑多久要打个问号。
📰 相关资讯(与本文相关的其他资讯)
本文由本站自动聚合,以下为原始来源:前往 驱动之家 阅读全文 →