加利福尼亚大学研究报告:让AI自我怀疑以防人类被颠覆

2017-06-15 10:36:20来源:人工智能网 热度:
专家称,人工智能机器人应该被赋予自我怀疑的属性,并有必要让机器人寻求人类肯定,以防人类被机器人推翻。
 
 
随着真正的人工智能的发展,专家们朝着奇点(机器将变得比人类更聪明)不断靠拢,研究人员正在研究如何确保人类在未来仍然是在地球的顶端。许多专家警告说,开发和我们一样有能力的机器会带来危险,因为它可能会让人类失业,并最终将我们视为阻碍,把我们从地球上抹去。
 
为了应对这一威胁,科学家们提出了可以对应的措施,其中一个思路是,开发人员应该给人工智能装上自我怀疑的能力。这个想法认为,如果人工智能会去怀疑他们自己,它就需要从人类那里寻求安慰,就像狗一样。这样就能巩固我们作为地球统治阶层的地位。
 
来自加利福尼亚大学的一个小组的研究结果显示,自我怀疑的机器人更听话。该研究小组在一篇发表在arXiv的论文中写道:“很明显,用来降低AI系统行为不当风险的措施之一,是设计人类关闭系统的功能。随着人工智能系统的能力不断提高,应确保此类系统不会产生与人类关闭系统起冲突的子目标。我们的研究目的是发现人工智能允许自己被关闭的动机是什么。在一个模拟实验中,一个机器人的“大脑”被人为关闭了,同时他能够自动重启。没有自我怀疑属性的机器人重新启动,但拥有该属性的机器人因它不确定结果是否违背人类的意愿而并未重启。”
 
该团队总结道:我们的分析表明,那些对其自身功能不明的人工智能,他们有动机去接受或寻求人类的监督。因此,开发对其本身功能不明确的系统,是设计研究安全人工智能系统方向一个很有前景的领域。

责任编辑:黄焱林

为您推荐

中央电视台和中央电台节目荣获AIBD奖项

7月20日,亚太广播发展机构(AIBD)第35次年会暨第8次全体会议在斐济楠边开幕。中央电视台选送的纪录片《水问》获得AIBD2009年电视大奖---水源问题最佳电视纪录片奖。中央电台选送的《农村妇女健康教育服务》节目获得AIBD2009年广播大奖---最佳健康关怀教育类广播节目奖。斐济总理姆拜尼马拉马出席大会开幕式并在颁奖仪式上为获奖者颁奖。

AirTies机顶盒赢得荷兰IPTV订单

9月15日消息,土耳其创新的无线家庭网络设备提供商AirTies昨天宣布荷兰运营商Caiway将采用他们的设备支持IPTV业务的拓展。利用AirTies的核心IP机顶盒平台,Caiway将可以为用户提供超过350套电视和广播频道。AirTies的高清晰度Air7120产品是支持实时暂停的NANDFlash功能的机顶盒,其快速中央处理能力,无线功能和优越的图形处理能力都可以让Caiway的IPTV业务更有吸引力。AirTies公司表示Caiway从1995年开始就开始利用有线电视网络提供互联网服务,是欧洲最早一个这样做的有线电视运营商,如今他们已经发展了75000多用户。他们选择AirTies的

摩托罗拉接获私人资本运营公司对其子公司的首轮投标

摩托罗拉(MotorolaInc.,MOT)接获一些私人资本运营公司对其电视机顶盒和无线网络装置生产子公司的首轮投标。这位消息人士表示,BainCapitalLLC、TPGCapitalLP、百仕通集团(BlackstoneGroupL.P.,BX)、SilverLakePartners和KohlbergKravisRoberts&Co进行了投标。摩托罗拉未允许在首轮竞标中联合竞标。《华尔街日报》(TheWallStreetJournal)11月12日曾报导称,摩托罗拉正在考虑出售上述子公司。消