该研究系统考察了Kolmogorov-Arnold网络(KAN)在强化学习中的样本效率。作者通过Feynman数据集和Gymnasium强化学习基准开展计算实验,对比KAN与传统多层感知机架构的表现。结果显示,采用KAN架构可在减少40%样本的情况下达到相近性能,训练过程中相对性能提升最高可达50%,且这些增益在不同奖励噪声水平下保持稳健。研究表明,KAN凭借更高的参数效率和可解释性,能够有效学习控制问题中的物理关系,为构建更样本高效的强化学习系统提供了新思路,对降低实际应用中数据采集成本具有重要意义。
| Kolmogorov-Arnold Networks (KAN) | 一种基于Kolmogorov-Arnold表示定理的神经网络架构,使用可学习的单变量函数替代传统固定激活函数,具有更高参数效率和可解释性。 |
| Sample-Efficiency | 指学习算法在达到特定性能水平时所需的训练样本数量,样本效率越高,所需样本越少。 |
| Deep Reinforcement Learning | 结合深度神经网络与强化学习的方法,使智能体通过与环境交互学习最优策略。 |
| Multi-Layer Perceptron (MLP) | 一种经典的前馈神经网络架构,由多层全连接神经元组成,常用于函数逼近。 |
| Feynman Dataset | 一个包含物理公式及其对应数据点的数据集,常用于评估模型学习物理关系的能力。 |
📱 每天一份 AI 前沿日报
关注公众号,每天 09:00 推送 · 不错过任何重磅