arXiv ID:
2602.14432
arXiv 提交日期: 2026-02-16
S2D:用于神经激活量化友好调节的选择性谱衰减 / S2D: Selective Spectral Decay for Quantization-Friendly Conditioning of Neural Activations
1️⃣ 一句话总结
这篇论文提出了一种名为S2D的新方法,通过有针对性地调整神经网络权重中影响最大的部分,有效解决了大模型量化时因激活值异常大而导致的精度下降问题,从而让模型在保持高性能的同时更容易被压缩和高效部署。