大模型杀入手机PC!端侧量产落地真来了
“AI+终端”时代的萌芽:大模型在终端领域的探索和量产落地|QCon上海
InfoQ 中文 重要 大模型商业化算力 🕐 今天 18:00

📖 AI 总结

文章围绕大模型从云端向终端迁移的趋势,探讨了“AI+终端”时代的工程化落地路径。核心观点是:AI工程重心正从云端转向车端、手机、可穿戴设备等资源受限终端,模型不仅要“跑得动”,还要低延迟、高稳定、可量产。关键发现包括:传统级联式语音交互存在延迟累积与语义断层,端到端流式多模态架构可将延迟控制在200毫秒以内;端侧模型压缩、量化与端云混合部署是量产关键,OTA迭代与数据飞轮构成持续进化闭环;当前端侧模型仍受尺寸、性能与时延制约,复杂推理需上云协同。演讲者基于百万级量产实践,提出“理解场景—执行任务—交付体验”的新能力边界,为终端OS架构师与智能硬件算法工程师提供了可参考的工程经验。

🔍 深度解读 换个视角,同一件事有不同答案

正在读取芙娘的解读…

📺 事件追更 15 条更新

QCon上海

QCon上海是一场全球软件开发技术大会,聚焦AI推理优化、大模型架构、强化学习系统优化、复杂业务Agent工程化及多模态AIGC内容生产等前沿技术分享。

  1. 2026-10-18 大模型杀入手机PC!端侧量产落地真来了(本篇)
  2. 2026-10-16 AI写完代码谁来验?手淘TEKO用“写—验—修”闭环搞定!
  3. 2026-10-11 柯南AI Agent落地移动端稳定性,崩溃定位效率翻倍!
  4. 2026-10-10 代码不再稀缺!AI狂写代码后,工程重心竟转向验证与治理
  5. 2026-10-06 AI+SRE≠AISRE!AI真正进入生产运维闭环的实战路径
  6. 2026-10-04 Agent记忆别再存对话了!企业数仓才是共享语义记忆的王炸
  7. 2026-10-03 企业级Agent落地必看:安全沙箱+网络管控+身份治理三大架构实战
  8. 2026-09-30 Vidu多模态大模型如何颠覆内容生产?QCon上海现场揭秘
  9. 2026-09-27 B2B跨境支付AI落地:可控可测可进化,金融级工程实践曝光!
  10. 2026-09-24 云栖之后,10+阿里AI实战派空降QCon上海!
  11. 2026-09-24 60万行巨石应用AI重构,交付还能验证!
  12. 2026-09-22 快手电商Agent靠Harness Loop持续进化,破解动态导购难题!
  13. 2026-09-20 快手AI架构大揭秘:大模型时代如何重构系统?
  14. 2026-09-19 从算子调优到推理自治,MaaS场景AI推理自动优化闭环一次讲透!
  15. 2026-09-17 RhymeRL从历史学起,强化学习训练效率大提升!
infoAI 公众号二维码

📱 每天一份 AI 前沿日报

关注公众号,每天 09:00 推送 · 不错过任何重磅