该研究系统检验了语料库选择对依存距离估计的影响,质疑了将单一语料库得出的依存距离视为语言稳定属性的常见做法。作者基于Universal Dependencies v2.18中的38对同语言树库,采用一致性相关、Bland-Altman分析和十二种预处理规格的多重宇宙设计进行比较。结果显示,跨树库一致性仅为中等水平:更换树库导致近40%的语言排序发生逆转,树库选择解释了约29%的组间方差,且该差异远超树库内抽样误差,并在所有预处理条件下持续存在。不过,所有树库均证实了依存长度最小化现象。研究结论认为,平均依存距离更宜视为受语法、语域和标注因素共同影响的语料库条件性复合指标,而非稳定的语言层级参数。这一发现对跨语言比较研究具有方法论警示意义。
| Dependency-distance estimates | 依存距离估计,指测量句子中依存关系距离的指标,常用于句法复杂度研究。 |
| Universal Dependencies | 通用依存关系,一个跨语言的多语种树库项目,提供统一的句法标注规范。 |
| Concordance correlation | 一致性相关,一种评估两个测量方法或数据集之间一致性的统计指标。 |
| Bland-Altman analysis | Bland-Altman分析,一种用于评估两种测量方法之间一致性的统计方法,通过绘制差异图来检查偏差和一致性界限。 |
| Multiverse design | 多重宇宙设计,一种研究方法,通过系统地改变分析规格来检验结果的稳健性。 |
📱 每天一份 AI 前沿日报
关注公众号,每天 09:00 推送 · 不错过任何重磅