返回
SyncQ-DiT: Synchronizing activation dynamics for quantizing diffusion transformers
DOI:10.1016/j.neucom.2026.133975.png)
摘要
En 中文
• 我们提出 SyncQ-DiT,一种面向 DiTs 的时间异常感知 PTQ 框架。• ARC 同步时步变化的异常通道以实现精确的低比特缩放。• ATG 通过异常分布对时步进行聚类以降低校准成本。• RGQ 对通道进行重新排序以在组量化中最大限度地减少组内方差。• SyncQ-DiT 在 DiT 和 PixArt 上实现了最先进的 W4A4 PTQ 性能。
Keyword:
SyncQ-DiT
PTQ
diffusion transformers
quantization
anomaly-aware

