法规机器解析分歧率高达43%!新证书让逻辑在噪声中存活,93.2%章节却失效
When Can a Machine Trust a Statute? A Survival Certificate for Machine-Extracted Legal Logic
arXiv AI (cs.AI) #法律AI#鲁棒性 🕐 09-03 12:00

📖 AI 总结

该研究探讨了机器解析法律条文时产生的逻辑可靠性问题。研究发现,两个独立编写的提取器在解析密苏里州法规时,对数字阈值存在与否的判断分歧显著,假阴性率达0.43。作者构建了一种被动“生存证书”机制,针对机器提取的法律形式背景的Duquenne-Guigues蕴含基,通过测量提取器间逐属性分歧,并在1000次蒙特卡洛试验中回放,仅当单侧Wilson 95%置信下限达到0.95时才认证蕴含关系。在29,365个密苏里章节和502个印度中央法案章节的测试中,预注册的保留门控通过,但93.2%的保留章节在全局错误模型下低于信息量下限,表明该证书虽可用但脆弱,需按章节校准或容忍错误。研究强调,机器信任法规需谨慎,建议部署时采用局部校准策略。

🔑 关键词速览

Duquenne-Guigues implication basis一种形式概念分析中的蕴含基,用于最小化表示属性间的逻辑依赖关系。
survival certificate一种统计验证方法,用于评估逻辑蕴含在噪声干扰下仍能保持有效的置信度。
Monte Carlo trials通过随机模拟多次试验来估计结果概率分布的统计技术。
Wilson 95% lower bound一种用于二项比例置信区间估计的统计方法,此处指单侧下界达到0.95的置信水平。
calibration-rate transfer指模型在不同数据集或章节间校准性能的迁移,影响错误率的分布。
infoAI 公众号二维码

📱 每天一份 AI 前沿日报

关注公众号,每天 09:00 推送 · 不错过任何重磅