而言就是安全的,永远只能作为一种工具、而不会成为一种威胁。
但现在,不经意间的深邃思考,却让方然窥见了其中的莫大危机。
当能力发展到一定程度,或许是出于“创造性研究”之目的,或许是出于其他动机,计算机的算力、能力突破了上限,继而达到能完全取代人的程度,不管这系统一开始的目标有没有包含自我意识,那样的计算机,其行为都将彻底失控。
那时的计算机,庞大体系内的算法,究竟是在进行一些什么样的运作,恐怕是人类绝对无法洞悉的深奥。
继而,对那样的存在,一切人类已有的概念与手段,都未必会起作用。
借用教义的词汇,在自己一手创造出的神祇面前,人的手段,又怎可能还会有任何的用处。
只因到那时,那样的计算机系统,将会是盖亚表面的一种前所未有之存在,是生命演化链条被人为截断之后,藉由完全不同之另一条路线而诞生的,更高等、更先进、更强大的新物种,演化天梯上比人更高一阶的存在。
面对那存在,人类对抗计算机,恰如猴对抗人类,又哪会有一丝一毫的胜算。
危险,莫大的危险,潜藏在计算机的发展脉络之中。