跳到正文
热点事件持续更新

Groq拟在下一代推理芯片堆叠DRAM

1 篇报道1 个报道来源2 小时前更新

先了解这件事

AI 综述

据行业消息,Groq 计划在下一代推理芯片中堆叠 DRAM,以绕开片上 SRAM 容量过小的限制。 当前 Groq 3 LPU 的 500MB SRAM 带宽达 150TB/s、约为 Rubin GPU HBM 带宽的 7 倍,但整机架 256 颗芯片合计仅 128GB;8-bit 万亿参数模型仅权重就需约 2000 颗芯片。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月21日
  1. RadarAI
    Groq 下一代推理芯片拟堆叠 DRAM 突破 SRAM 容量瓶颈

    据行业消息,Groq 计划在下一代推理芯片中堆叠 DRAM,以绕开片上 SRAM 容量过小的限制。当前 Groq 3 LPU 的 500MB SRAM 带宽达 150TB/s、约为 Rubin GPU HBM 带宽的 7 倍,但整机架 256 芯片仅 128GB,8-bit 万亿参数模型光权重就需约 2000 颗芯片。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。