跳到正文
arXiv cs.AI· Arash Akbari, Arman Akbari, Masih Eskandar, Qitao Tan, Yixiao Chen, Jingwu Luo, Bertha Pangaribuan, Liyun Zhang, Jennifer Dy, Geng Yuan, Xue Lin, Gaowen Liu, Stratis Ioannidis, Yanzhi Wang·· 11 小时前AI 评分35

ActQuant:面向视觉-语言-动作模型的亚4-bit动作引导骨干权重仅量化

ActQuant: Sub-4-bit Action-Guided Backbone Weight-Only Quantization for Vision-Language-Action Models

AI 导读

ActQuant 是一个动作引导的混合精度 PTQ 框架,通过 inter-tensor 位宽分配与 intra-tensor 缩放优化,在 LIBERO 上成为唯一能在 3 bits-per-weight 及以下运行的方法,OpenVLA-OFT 保留 95.0%、π0.5 保留 94.8%。

正文 · AI 翻译

作者:Arash Akbari、Arman Akbari、Masih Eskandar、Qitao Tan、Yixiao Chen、Jingwu Luo、Bertha Pangaribuan、Liyun Zhang、Jennifer Dy、Geng Yuan、Xue Lin、Gaowen Liu、Stratis Ioannidis、Yanzhi Wang

查看 PDF HTML(实验性)

摘要:视觉-语言-动作(VLA)模型在具身智能中展现出卓越的动作生成能力,但其庞大的计算量使边缘平台部署变得不切实际。激进的低于 4 比特权重量化是自然的解决方案,然而现有的训练后量化(PTQ)方法在该区间性能严重下降。为此,我们提出 ActQuant,一个动作引导的混合精度 PTQ 框架,分两个阶段运行:(1)张量间比特分配器根据每个权重矩阵对预测智能体动作的贡献程度,为其分配单一比特宽度;(2)张量内尺度优化器利用动作感知曲率调整逐块量化尺度,使动态范围集中于对控制影响最大的权重上。为发挥激进量化在设备端的优势,我们进一步推出 this http URL,一个智能体化转换流水线,可将架构移植到原生 C/C++ 运行时并配备高效低位内核。我们在仿真环境和真实 6 自由度 UR3 机械臂上评估 ActQuant,所有模型均通过 this http URL 部署。在 LIBERO 基准上,ActQuant 是唯一能在每权重 3 比特及以下运行的方法,在 OpenVLA-OFT 上保持 95.0%,在 $\pi_{0.5}$ 上保持 94.8%。进一步推进,ActQuant 在 OpenVLA-OFT 上以 2.5 bpw 达到 90.1%,将主干网络从 14.3 GB 压缩至 2.7 GB(5.3$\times$)。在实体 UR3 机械臂上,经 ActQuant 量化的 $\pi_{0.5}$ 在保持基线成功率的同时将内存占用降低 2.5$\times$。
主题: 计算机视觉与模式识别(cs.CV);人工智能(cs.AI)
引用为: arXiv:2605.24011 [cs.CV]
  (或本版本使用 arXiv:2605.24011v4 [cs.CV])
  https://doi.org/10.48550/arXiv.2605.24011

arXiv 颁发的 DOI,经由 DataCite

提交历史

来自:Arash Akbari [查看邮箱]
[v1] 2026 年 5 月 19 日星期二 19:57:26 UTC(1,871 KB)
[v2] 2026 年 6 月 4 日星期四 20:07:22 UTC(1,871 KB)
[v3] 2026 年 8 月 3 日星期一 19:37:08 UTC(1,871 KB)
[v4] 2026 年 11 月 5 日星期四 06:15:12 UTC(1,781 KB)

来源:arXiv cs.AI · arxiv.org