WiSPER 是一种面向 WiFi CSI 多人 3D 姿态估计的两阶段框架,旨在解决不同人体反射信号相互重叠、难以直接定位关节的难题。该方法将姿态感知的预测式预训练与条件残差流细化相结合:第一阶段通过掩码隐变量预测并辅以姿态集监督,引导编码器从部分观测中学习关节定位;第二阶段利用 Transformer 生成可变数量的姿态候选,并依据粗坐标与逐关节解码特征进行条件流细化。训练阶段使用配对的 CSI 与姿态标注,推理时仅需 CSI。在 PiW3D 数据集上,WiSPER 的平均逐关节位置误差为 63.72 毫米,较 WiFi-JEPA 降低 40.0%;两人和三人场景下 MPJPE 分别下降 42.1% 和 38.1%,残差细化模块进一步带来 13.8% 至 15.6% 的误差改善。该工作表明显式姿态监督与残差流细化能有效提升 WiFi 感知姿态估计的精度与多人适应能力。
| WiFi CSI | WiFi信道状态信息,描述无线信号在传播过程中幅度和相位的变化,可用于感知人体姿态。 |
| PAMEL | 姿态感知掩码嵌入学习,一种将掩码潜在预测与辅助姿态监督结合的预训练方法。 |
| ReFT | 基于Transformer的残差流细化,通过条件流生成并优化姿态候选以处理可变人数。 |
| MPJPE | 平均逐关节位置误差,衡量估计的3D关节坐标与真实值之间平均距离的指标。 |
| WiFi-JEPA | 一种基于联合嵌入预测架构的WiFi姿态估计基线方法,仅使用CSI进行预训练。 |
📱 每天一份 AI 前沿日报
关注公众号,每天 09:00 推送 · 不错过任何重磅