arXiv ID:
2602.05648
arXiv 提交日期: 2026-02-05
动词形态范式建模:土耳其语和希伯来语分词案例研究 / Modelling the Morphology of Verbal Paradigms: A Case Study in the Tokenization of Turkish and Hebrew
1️⃣ 一句话总结
这篇论文研究发现,Transformer模型处理土耳其语和希伯来语复杂动词形态的能力,高度依赖于分词策略是否与语言本身的形态结构(如土耳其语的黏着性、希伯来语的非连接性)相匹配。