课程学习为何时灵时不灵?Wasserstein路径解耦4大设计因素,12任务实测:没有万能策略!
Curriculum Learning as Transport: Understanding Curricula with Wasserstein Geodesics
arXiv LG (cs.LG) 重要 #课程学习#最优传输#训练方法 🕐 09-08 12:00

📖 摘要

用Wasserstein测地线统一课程学习设计因素,提供解耦分析框架。

🔑 关键词速览

Curriculum Learning一种机器学习训练策略,通过从简单样本到困难样本的排序来加速学习并提高性能。
Wasserstein Geodesics基于Wasserstein距离的最优传输路径,用于度量概率分布之间的几何变化。
Transport-based Framework一种利用最优传输理论将分布变化建模为轨迹的框架,用于解耦课程设计因素。
Exposure-matched Static Sampling一种基线方法,在训练中均匀或随机采样样本,但确保每个难度级别的总曝光量与课程方法相同。
Difficulty Axis定义样本难度的维度或属性,如噪声水平、复杂度等,用于构建课程。
infoAI 公众号二维码

📱 每天一份 AI 前沿日报

关注公众号,每天 09:00 推送 · 不错过任何重磅