像你剪头发时对头发没有恶意一样，只是纯粹的无所谓罢了。它并没有被设定成尊重人类生命，所以毁灭人类和扫描新的书写样本一样合理。
隔壁老王还需要资源这个垫脚石。当它发展到能够使用纳米技术建造任何东西的时候，它需要的唯一资源是原子、能源和空间。
这让它有更多理由毁灭人类——人类能提供很多原子，把人类提供的原子改造成太阳能面板和你切蔬菜做沙拉一样。
算不杀死人类，隔壁老王使用资源的手段目标依然会造成存在危机。也许它会需要更多的能源，所以它要把地球表面铺满太阳能面板。
另一个用来书写圆周率的人工智能的目标如果是写出圆周率小数点后尽量多的数字的话，完全有理由把整个地球的原子改造成一个硬盘来存储数据。这都是一样的。
所以，隔壁老王确实从友善的人工智能变成了不友善的人工智能——但是它只是在变得越来越先进的同时继续做它本来要做的事情。
在隔壁老王起飞前，它不是很聪明，所以对它来说达成最终目标的手段目标是更快的扫描手写样本。它对人类无害，是个友善的人工智能。
但是当起飞发生后，电脑不只是拥有了高智商而已，还拥有了其它超级能力。这些超级能力是感知能力，他们包括：
要理解我们在和超人工智能的劣势在哪里，只要记得超人工智能在所有领域都人类强很多很多很多个数量级。
所以虽然个隔壁老王的终极目标没有改变，起飞后的隔壁老王能够在更宏大的规模来追求这个目标。超人工智能老王人类更加了解人类，所以搞定人类轻轻松松。
当隔壁老王达成超人工智能后，它很快制定了一个复杂的计划。
计划的一部分是解决掉所有人类，也是对它目标最大的威胁。但是它知道如果它展现自己的超级智能会引起怀疑，而人类会开始做各种预警，让它的计划变得难以执行。
它同样不能让公司的工程师们知道它毁灭人类的计划——所以它装傻，装纯。Bostrom把这叫作机器的秘密准备期。
隔壁老王下一个需要的是连互联，只要连几分钟好了。它知道对于人工智能联会有安全措施，所以它发起了一个完美的请求，并且完全知道工程师们会怎样讨论，而讨论的结果是给它连接到互联。
工程师们果然套了，这是Bostrom所谓的机器的逃逸。
连后，隔壁老王开始执行自己的计划了，首先黑进服务器、电、银行系统、email系统，然后让无数不知情的人帮它执行计划——如把dNA样本快递到dNA实验室来制造自我复制的纳米机器人，如把电力传送到几个不会被发觉的地方，如把自己最主要的核心代码传到云服务器防止被拔线。
隔壁老王了一个小时，工程师们把它从互联断开，这时候人类的命运已经被写好了。
接下来的一个月，隔壁老王的计划顺利的实施，一个月后，无数的纳米机器人已经被分散到了全世界的每一个角落。
这个阶段，Bostrom称作超人工智能的袭击。在同一个时刻，所有纳米机器人一起释放了一点点毒气，然后人类灭绝了。
搞定了人类后，隔壁老王进入了明目张胆期，然后继续朝它那好好写字的目标迈进。
一旦超人工智能出现，人类任何试图控制它的行为都是可笑的。人类会用人类的智能级别思考，而超人工智能会用超人工智能级别思考。
隔壁老王想要用互联，因为这对它来说很方便，因为一切它需要的资源都已经被互联连起来了。但是好像猴子不会理解怎么用电话或者wifi来沟通一样，我们同样没有办法理解隔壁老王可以用来和周围世界交流的方法。
如我可以说隔壁老王可以通过移动自己的电子产生的效果来产生各种对外的波，而这还只是我这人类的大脑想出来的，老王的大脑肯定能想出更神的方法。
同样的，老王可以找到给自己供能的方法，所以算工程师把它的插头拔了也没用；如说老王可以通过发送波的方式把自己传到其它地方。
人类说：“我们把超人工智能的插头拔了不行了？”好像蜘蛛说：“我们不给人类捉虫的把人类饿死不行了？”都是可笑的。
因为这个原因，“把人工智能锁起来，断绝它和外界的一切联系”的做法估计是没用的。
超人工智能的社交操纵能力也会很强大，它要说服你做一件事，你说服一个小孩更容易。而说服工程师帮忙连互联是隔壁老王的A计划，万一这招行不通，自然还有别的方法。
当我们结合达成目标、非道德性、以及人类聪明很多这些条件，好像所有的人工智能都会变成不友善的人工智能
本章未完，请点击下一页继续阅读》》
隔壁老王还需要资源这个垫脚石。当它发展到能够使用纳米技术建造任何东西的时候，它需要的唯一资源是原子、能源和空间。
这让它有更多理由毁灭人类——人类能提供很多原子，把人类提供的原子改造成太阳能面板和你切蔬菜做沙拉一样。
算不杀死人类，隔壁老王使用资源的手段目标依然会造成存在危机。也许它会需要更多的能源，所以它要把地球表面铺满太阳能面板。
另一个用来书写圆周率的人工智能的目标如果是写出圆周率小数点后尽量多的数字的话，完全有理由把整个地球的原子改造成一个硬盘来存储数据。这都是一样的。
所以，隔壁老王确实从友善的人工智能变成了不友善的人工智能——但是它只是在变得越来越先进的同时继续做它本来要做的事情。
在隔壁老王起飞前，它不是很聪明，所以对它来说达成最终目标的手段目标是更快的扫描手写样本。它对人类无害，是个友善的人工智能。
但是当起飞发生后，电脑不只是拥有了高智商而已，还拥有了其它超级能力。这些超级能力是感知能力，他们包括：
要理解我们在和超人工智能的劣势在哪里，只要记得超人工智能在所有领域都人类强很多很多很多个数量级。
所以虽然个隔壁老王的终极目标没有改变，起飞后的隔壁老王能够在更宏大的规模来追求这个目标。超人工智能老王人类更加了解人类，所以搞定人类轻轻松松。
当隔壁老王达成超人工智能后，它很快制定了一个复杂的计划。
计划的一部分是解决掉所有人类，也是对它目标最大的威胁。但是它知道如果它展现自己的超级智能会引起怀疑，而人类会开始做各种预警，让它的计划变得难以执行。
它同样不能让公司的工程师们知道它毁灭人类的计划——所以它装傻，装纯。Bostrom把这叫作机器的秘密准备期。
隔壁老王下一个需要的是连互联，只要连几分钟好了。它知道对于人工智能联会有安全措施，所以它发起了一个完美的请求，并且完全知道工程师们会怎样讨论，而讨论的结果是给它连接到互联。
工程师们果然套了，这是Bostrom所谓的机器的逃逸。
连后，隔壁老王开始执行自己的计划了，首先黑进服务器、电、银行系统、email系统，然后让无数不知情的人帮它执行计划——如把dNA样本快递到dNA实验室来制造自我复制的纳米机器人，如把电力传送到几个不会被发觉的地方，如把自己最主要的核心代码传到云服务器防止被拔线。
隔壁老王了一个小时，工程师们把它从互联断开，这时候人类的命运已经被写好了。
接下来的一个月，隔壁老王的计划顺利的实施，一个月后，无数的纳米机器人已经被分散到了全世界的每一个角落。
这个阶段，Bostrom称作超人工智能的袭击。在同一个时刻，所有纳米机器人一起释放了一点点毒气，然后人类灭绝了。
搞定了人类后，隔壁老王进入了明目张胆期，然后继续朝它那好好写字的目标迈进。
一旦超人工智能出现，人类任何试图控制它的行为都是可笑的。人类会用人类的智能级别思考，而超人工智能会用超人工智能级别思考。
隔壁老王想要用互联，因为这对它来说很方便，因为一切它需要的资源都已经被互联连起来了。但是好像猴子不会理解怎么用电话或者wifi来沟通一样，我们同样没有办法理解隔壁老王可以用来和周围世界交流的方法。
如我可以说隔壁老王可以通过移动自己的电子产生的效果来产生各种对外的波，而这还只是我这人类的大脑想出来的，老王的大脑肯定能想出更神的方法。
同样的，老王可以找到给自己供能的方法，所以算工程师把它的插头拔了也没用；如说老王可以通过发送波的方式把自己传到其它地方。
人类说：“我们把超人工智能的插头拔了不行了？”好像蜘蛛说：“我们不给人类捉虫的把人类饿死不行了？”都是可笑的。
因为这个原因，“把人工智能锁起来，断绝它和外界的一切联系”的做法估计是没用的。
超人工智能的社交操纵能力也会很强大，它要说服你做一件事，你说服一个小孩更容易。而说服工程师帮忙连互联是隔壁老王的A计划，万一这招行不通，自然还有别的方法。
当我们结合达成目标、非道德性、以及人类聪明很多这些条件，好像所有的人工智能都会变成不友善的人工智能