企业指南转化从3天缩至20分钟!SAGE流水线成功率达96%,幻觉率仅3.2%
SAGE: Governed Artifact Generation from Enterprise Guidelines
arXiv AI (cs.AI) 重要 大模型商业化论文方法 🕐 09-17 12:00

📖 AI 总结

企业指南文档通常混合叙述文本、复杂表格和嵌入图像,将其转化为结构化工作产物目前每份仍需两到三天人工处理。现有语言与视觉语言模型虽能完成抽取,却缺乏验证、一致性检查与可追溯的产物生成等治理流程。为此,作者提出SAGE,一个受治理的多阶段LLM流水线,围绕共享的版本化规则库构建,具备稳定标识符、模式校验的跨阶段契约和端到端溯源追踪。抽取出的规则先经确定性结构验证与基于LLM的语义评分,再由一致性模块去重、标记矛盾并揭示规范缺口;仅不确定或被标记项交由人工复核,高置信度输出自动批准。在120份文档上,SAGE将处理周期从数天缩短至20至100分钟,文档级成功率达96%,幻觉率3.2%,共抽取3896条规则并生成812个可供人工审核的产物;若无治理机制,幻觉率升至15.7%。

🔑 关键词速览

SAGE本文提出的受治理多阶段LLM流水线,用于从企业指南文档生成结构化工作产物。
Governed Workflow包含验证、一致性检查和可追溯产物生成等治理环节的工作流程。
Versioned Rule Store具有稳定标识符的共享规则存储库,支持版本管理和跨阶段契约。
Provenance Tracking端到端追踪数据来源和转换过程,确保产物的可追溯性。
Hallucination模型生成与输入文档不符或虚构内容的现象,本文中通过治理机制显著降低。
infoAI 公众号二维码

📱 每天一份 AI 前沿日报

关注公众号,每天 09:00 推送 · 不错过任何重磅