arXiv ID:
2512.07805
arXiv 提交日期: 2025-12-08
群表示位置编码 / Group Representational Position Encoding
1️⃣ 一句话总结
这篇论文提出了一个名为GRAPE的统一框架,它利用数学中的群作用理论,将RoPE和ALiBi等主流位置编码方法都纳入其中,为设计长文本模型中的位置信息表示提供了一个更通用、更灵活的理论基础。