杨强解析大模型六大矛盾与解决思路

花花2025-10-18科普教程15

专题:全球财富管理论坛·2025上海苏河湾大会

10月18日金融一线消息,全球财富管理论坛·2025上海苏河湾大会10月18日至19日在上海市静安区举办。加拿大皇家学院院士、加拿大工程院院士杨强出席大会并深入剖析大模型发展中的六大矛盾及解决思路。

杨强解析大模型六大矛盾与解决思路

杨强首先指出,AI 领域存在 “扩展定律” 与 “摩尔定律” 的矛盾。“扩展定律” 显示 AI 每年成本下降十倍,能力增长十倍;“摩尔定律” 则表明芯片硬件能力每一年半增长一倍。随着时间推移,代表 AI 的蓝色曲线与代表硬件的红色曲线差距渐大,硬件对 AI 的支持远赶不上 AI 需求,而模型越复杂能力越强,如深度学习网络层次增至上千层时,能力较基线提升 20-50 倍。对此,他提出通过 AI 基础设施优化,将多个专家系统结合成算力中心,同时在训练、通信、推理、运行阶段全面优化,且 Oracle 等公司因聚焦基础设施与算力中心优化,股价大幅增长,GPU 集体优化也需重视。

第二个矛盾围绕智能体展开。智能体是大模型落地的有效方案,多智能体被认为是未来大模型应用的关键,但每个智能体准确率并非 100%,多智能体组合后准确率会因 “小于 1 的数相乘” 而不断下降,伯克利报告已指出此问题。杨强院士提到,可利用信念机制(Belief System)缓解,他与学生还提出 “智能体工厂” 概念,若多智能体系统中的智能体由大模型原生生产,能大幅缓解准确率下降问题。

第三个矛盾是人类对安全、价值观、道德准则的要求与大模型发展间的矛盾,涉及大模型幻觉、隐私保护、知识产权保护等。目前已有相关研究关注输出安全、模型自身安全及系统审计,可对模型跟踪、生成数据并审计。但杨强院士与学生推出的定理表明,模型隐私保护与推理能力不可调和,无法实现 100% 安全且 100% 高效。针对模型知识产权保护,他与同事提出模型版权保护及 “打水印” 方案,水印易检测且难抹除,还能防止模型合作中 “滥竽充数”,相关成果已收录于《AI 模型水印》一书。

第四个矛盾是大模型训练与推理阶段的算力分配矛盾。在计算资源有限时,需平衡算力在训练与推理上的投入,两者决策影响模型整体表现。研究显示,推理资源增多时,训练资源可适当减少,且推理可用 CPU 进行,无需依赖 GPU。

第五个矛盾是人类数据供应与 AI 数据需求的矛盾。人类制造的训练数据增长缓慢,而 AI 需求增长迅速,预计 2028 年两者曲线相交时,AI 或面临停止增长问题,根源在于公域数据耗尽。杨强院士指出,90% 以上的私域数据(如个人、医院、金融机构数据)未参与大模型训练,他聚焦相关研究,提出 “联邦学习和师生大模型” 方案。云端通用大模型缺乏行业知识,本地有私域数据却因算力不足只能建垂域小模型,通过联邦学习可连接两者,让大模型教小模型推理能力,小模型教大模型垂域知识,同时保护隐私。他还提到主导的 “迁移学习”,能在新领域数据不足时,将成熟领域知识迁移过去,联邦学习则可实现多 “学生” 互助及与 “老师” 学习。

第六个矛盾是 “灾难性遗忘” 与 “主动遗忘” 的矛盾。模型后续学习会抹除前期知识,即 “灾难性遗忘”;而 “主动遗忘” 也很重要,如按数据安全法要求撤出客户数据。杨强院士已设计相关算法解决。

杨强院士表示,大模型在金融界有客服、营销、反欺诈、反洗钱等成功应用。若不能妥善处理上述矛盾,AI 可能进入寒冬或面临巨大麻烦。

相关文章

特朗普与内塔尼亚胡“关系紧张”?美国中东问题特使否认

特朗普与内塔尼亚胡“关系紧张”?美国中东问题特使否认

【环球网报道】在土耳其阿纳多卢通讯社9日爆出“美国总统特朗普认为以色列总理内塔尼亚胡正在操纵他,决定切断与他的直接联系”后,美国全国广播公司(NBC)11日报道称,在伊朗和加沙问题上的分歧导致特朗普与...

初中考试点评写作技巧与范文示例

初中考试点评写作技巧与范文示例

本文将针对初中考试点评的写作进行详细解析,并提供一个范文,以供参考。 一、点评写作的基本原则 初中考试点评需要遵循几个基本原则:客观公正、具体深入、条理清晰。在点评时,要避免主观情感色彩,对学...

公募开启自购模式:博时、招商、鹏扬、兴证全球率先出手

公募开启自购模式:博时、招商、鹏扬、兴证全球率先出手

专题:坚定看多!多家基金公司宣布自购旗下产品 接力“国家队”维稳动作,公募基金加入到护盘行列。 4月9日,兴证全球基金公告称,自4月8日起陆续运用固有资金自购旗下权益类公募基金,自购金额合计将不少于人...

初中生期末考试评语简短汇编

初中生期末考试评语简短汇编

本学期,同学们在期末考试中表现出了良好的学习态度和进步空间。以下是对每位初中生简短的期末考试评语: 1. 学习态度积极,成绩稳步提升,望保持。 你在本学期的学习中表现出了积极向上的态度,成绩也...

经济学人智库中国首席经济学家苏月:全球化进入新阶段,供应链区域化重塑与深化国际连接

经济学人智库中国首席经济学家苏月:全球化进入新阶段,供应链区域化重塑与深化国际连接

专题:2025可持续全球领导者大会&首届绿色产业与可持续消费博览会 炒股就看金麒麟分析师研报,权威,专业,及时,全面,助您挖掘潜力主题机会! 2025可持续全球领导者大会于10月16日-18日在上海市...

杜嘉祺离职汇丰集团主席 重回友邦保险

杜嘉祺离职汇丰集团主席 重回友邦保险

摘    要  杜嘉祺曾于2010年至2017年间担任友邦保险首席执行官兼总裁,目前正是友邦保险在中国内地扩张的重要时点 6月6日早间,友邦保险控股有限公司(下称“友邦保险”,1299.HK)发布公...