近似Cholesky新突破:CAST用随机树替代稠密团,误差直降1/ρ!
CAST: Canonical Approximate Schur Tree for Approximate Cholesky on Graphs
arXiv ML (stat.ML) 重要 #图算法#数值线性代数#预条件子 🕐 09-10 12:00

📖 AI 总结

本文提出CAST(Canonical Approximate Schur Tree)方法,用于改进图数据上近似Cholesky预条件子的构造。图数据工作负载(如扩散估计、排序、半监督学习)常需对同一系数矩阵反复求解拉普拉斯或SDDM系统,近似Cholesky通过逐个消元并存储稀疏因子来摊销构造成本,但消去一个顶点会在其d个活跃邻居间形成稠密的Schur补团。CAST用从该团中采样的加权随机生成树替代稠密团,每次实现均连通且恰含d-1条边,并按树包含概率的倒数重新加权,使更新保持无偏。作者证明该分布在枢轴邻居顺序下不变,且其杠杆分数边际在无偏逆边际单树估计量中最小化最大归一化重加权边贡献。进一步提出CAST-ρ,通过复制邻居并收缩,可在O(ρd)时间内精确采样,并将归一化局部Schur误差二阶矩限制在1/ρ。实验表明CAST-1为更快的默认选择,CAST-2在额外边贡献较低时更优。

🔑 关键词速览

近似Cholesky预条件子一种用于加速求解线性方程组的稀疏近似分解方法,通过消去顶点构造近似因子。
Schur补在矩阵消去过程中,由剩余变量形成的子矩阵,用于表示消去变量后的影响。
加权随机生成树从图中根据边权重随机抽取的生成树,每条边被选中的概率与其权重相关。
杠杆分数衡量矩阵中某一行或列对整体影响程度的统计量,常用于采样和矩阵近似。
SDDM矩阵对称对角占优M矩阵,是一类具有特殊性质的稀疏矩阵,常见于图拉普拉斯系统。
infoAI 公众号二维码

📱 每天一份 AI 前沿日报

关注公众号,每天 09:00 推送 · 不错过任何重磅