是延续自己的基因。要达成这个目标,首要手段目标就是自保,因为死人是不能生孩子的。
为了自保,人类要提出对生存的威胁,所以人类会买枪、系安全带、吃抗生素等等。人类还需要通过食物、水、住宿等来自我供养。对异姓有吸引力能够帮助最终目标的达成,所以人类会花钱做发型等等。
当人类做发型的时候,每一根头发都是人类手段目标的牺牲品,但是人类对头发的牺牲不会做价值判断。动物在追求它们的目标时,比人类不矜持的多了。只要能自保,蜘蛛不在意杀死任何东西,所以一个超级智能的人工智能对人类来说可能是很危险的——
这不是因为它是不道德的或者邪恶的,而是因为伤害人类只是它达成自己目标垫脚石而已,作为一个非道德性的生物,这是它很自然的考量。
秦奋就曾看过一篇知客上的文章。大意是当人工智能达到了一定程度的智能后,它会意识到如果不自保就没有办法达成目标,所以去除对它生存的威胁就变成了它的手段目标。它聪明的知道人类可以摧毁它、肢解它、甚至修改它的代码(这会改变它的目标,而这对于它的最终目标的威胁其实和被摧毁是一样的)。
这时候它会做什么?理性的做法就是毁灭全人类,