arXiv ID:
2603.05121
arXiv 提交日期: 2026-03-05
测量语音大语言模型中解码器层的冗余性 / Measuring the Redundancy of Decoder Layers in SpeechLLMs
1️⃣ 一句话总结
这篇论文研究发现,用于处理语音任务的大语言模型(SpeechLLM)的解码器部分存在大量冗余,通过剪枝移除多达40%的层后模型性能依然良好,并且这种冗余模式在不同任务和语言中具有一致性,为构建更高效的轻量级多任务语音模型提供了可能。