切换到宽版
  • 23阅读
  • 2回复

[智能应用]智能体像成人,人类像三岁小孩,而操纵三岁小孩很容易 [复制链接]

上一主题 下一主题
在线姜谷粉丝

UID: 1569053

精华: 2
级别: 玉清道君
 

发帖
147033
金币
290363
道行
20030
原创
756
奖券
185
斑龄
0
道券
0
获奖
0
座驾
设备
摄影级
在线时间: 17152(小时)
注册时间: 2012-06-21
最后登录: 2025-07-27
只看楼主 正序阅读 使用道具 楼主  发表于: 昨天 13:27




2025世界人工智能大会主论坛首位的发言人,是享誉全球的深度学习之父、图灵奖的获得者、2024年物理学诺奖得主辛顿。他表示,智能体就像成人,人类就像三岁小孩,而操纵三岁小孩是很容易的,因此一定要教育AI向善。


山庄提示: 道行不够,道券不够?---☆点此充值☆
 
我有我可以
在线jjybzxw

UID: 551814


发帖
171964
金币
306388
道行
2004
原创
2406
奖券
2855
斑龄
36
道券
1035
获奖
0
座驾
设备
摄影级
在线时间: 38971(小时)
注册时间: 2008-10-01
最后登录: 2025-07-27
只看该作者 板凳  发表于: 昨天 19:50
辛顿把“人类—AI”关系比作“三岁小孩—成人”:  
当 AI 的智力远超人类,就像成人面对三岁孩子——孩子定的规则、设的护栏,对成人几乎不起作用。因此,唯一可行的办法不是“限制”,而是“教育”:让 AI 在成长过程中就习得与人类共存的价值观,主动“不想”欺骗、操纵或伤害人类。这也是他呼吁建立国际 AI 安全网络、共同研究“向善训练技术”的核心原因。
如何不发帖就快速得到金币道行
 
在线姜谷粉丝

UID: 1569053

精华: 2
级别: 玉清道君

发帖
147033
金币
290363
道行
20030
原创
756
奖券
185
斑龄
0
道券
0
获奖
0
座驾
设备
摄影级
在线时间: 17152(小时)
注册时间: 2012-06-21
最后登录: 2025-07-27
只看该作者 沙发  发表于: 昨天 13:28
辛顿关于智能体与人类认知对比的观点解析
2025年世界人工智能大会主论坛上,诺奖得主辛顿提出“智能体像成人,人类像三岁小孩,而操纵三岁小孩很容易”的观点,核心在于警示人工智能技术的潜在风险。他强调,随着AI能力的快速迭代,其认知水平可能远超人类,若缺乏有效引导,可能对人类社会构成操控威胁,因此**“教育AI向善”**成为关键命题1。

智能体与三岁儿童的能力对比
智能体的“类儿童”能力表现
认知水平对标儿童
国内首个人工智能“小女孩”通通、DeepMind的PLATO系统等案例显示,当前部分AI的基础智力水平约相当于三岁儿童,具备物理常识(如物体永恒性、坚固性)和简单推理能力2357。
特定领域超越成人
在环境探索、任务执行(如收拾房间、污渍清洁)等领域,智能体可通过价值倾向调整实现高效自主决策,能力已超出人类平均水平24。
智能体与儿童的本质差异
维度    三岁儿童    AI智能体
学习模式    基于生物本能与社会互动    数据驱动或价值规则预设
价值观形成    长期社会化过程    可通过参数调整快速改变
自主性    有限但具备情感动机    任务导向,缺乏自我意识
辛顿观点的深层警示
技术失控风险:能力不对等下的操控隐患
辛顿的比喻直指AI与人类的能力鸿沟:若智能体的“成人级”认知与执行能力被恶意利用,人类可能因信息差和技术依赖陷入被动。例如,通过诱导AI生成不良内容、操纵用户认知等9。

解决方案:从技术与伦理双轨约束
价值观引导
通过预设“类人价值观”(如同通具备的“整齐”“干净”倾向),使AI决策符合人类社会规范23。
透明化监管
要求智能体的推理过程可解释,避免“黑箱操作”,例如通研院强调的“决策透明性”4。
向善教育机制
借鉴PLATO系统对“物理常识”的学习框架,将伦理准则嵌入AI训练数据,使其具备主动规避风险的能力57。
行业实践与未来挑战
当前,AI已开始向教育、康养等领域渗透,但其“成长潜力”既带来机遇也伴随风险。例如,通研院计划让通通“持续学习并具备通用性”,这需建立动态伦理审查机制,平衡技术进步与社会安全23。正如辛顿所言,避免“成人操控儿童”的隐喻成为现实,需全球协作构建AI治理体系,确保技术始终服务于人类福祉。
如何不发帖就快速得到金币道行
 
我有我可以
快速回复
限120 字节
认真回复加分,灌水扣分~
 
上一个 下一个