人工智能与人类未来

如果历史上的纳粹政府未被打败，如今它们会是什么样子？纳粹使用的是20世纪的技术，直到二战战败才终止发展。如果纳粹比美国更早制造出原子弹，他们会有多强大，能撑多久？纳粹如果掌握当时最先进的技术，可以巩固权力，改变历史进程。

当我们试想存在的风险时，像核战争或小行星撞击这样的惨剧经常浮现在我们的脑海中。然而，未来还有一个威胁不太为人所知一一虽然它不太可能会让人类灭绝，但同样糟糕。

但这有可能吗？研究人员和哲学家们开始思考“它”是如何产生的，我们能做些什么来避免这种情况出现。

有可能的风险都是灾难性的，因为它们把人类困在单一命运中，比如文明永久崩溃或人类灭绝。这些灾难可能是由自然原因造成的，如小行星撞击或超级火山爆发，也可能是核战争或气候变化等因素造成的。剑桥大学存在风险研究中心的学术项目经理海顿·贝尔菲尔德表示，如果这种情况发生，将是“人类命运的悲惨结局”，并将让我们愧对几百代祖先。

牛津大学人类未来研究所高级研究员托比·奥德认为，本世纪发生自然灾害的概率不到1/2000，因为没有自然灾害，人类已经存活了2000个世纪。然而，如果计算人为灾难，奥德相信这种可能性会增加到惊人的1/6。他把这个世纪称为“悬崖”，意思是人类失去未来的风险从未如此之高。

伦敦一家非营利性研究机构一一长期风险中心的研究人员对未知风险进行了进一步研究，提出了更令人不寒而栗的预测。这些“超级风险”被定义为“天文级的痛苦，远远超过迄今为止地球上存在的所有痛苦”。“在这种情况下，数十亿人仍存活，但质量极端低劣，前景黯淡，死亡将是更好的选择。”简而言之：一个负价值的未来比一个没有价值的未来更糟糕。这就是“被锁链锁住的世界”场景的由来。

单例模式的假设

尽管全球极权主义仍是一个小众研究主题，但潜在风险领域的研究人员正越来越多地将注意力转向最有可能导致全球极权主义的原因：人工智能。

牛津大学人类未来研究所主任尼克·博斯特罗姆在他的《单例假说》中，解释了如何利用人工智能或其他强大技术形成一个全球政府，以及它可能无法被推翻的原因。他写道，如果该机构“利用人工智能或分子纳米技术的突破取得决定性领先地位”。

奥德在最近的一次采访中说：“我们可能目前还没有技术实现这一点，但正在开发的技术让这种状况越来越有可能。”“在未来100年的某个时候，这似乎有可能成为现实。”

人工智能和威权主义

“我们看到，人工智能带给人类的未来，已经从非常的乌托邦转变为反乌托邦，这发人深省。”新美国安全中心的兼职高级研究员埃尔莎·堪尼亚说，这是一个无党派非营利研究国家安全和国防政策的中心。

在2019年停止国内监控之前，美国国家安全局收集了数亿美国人的通话和短信记录。据估计，英国各地有400万～600万个闭路电视摄像头。全球最受监控的20个城市中伦敦位居第三。它们之间使用的技术没有差别，而差别更多的在于使用技术的方式。

除了加强监控，人工智能还能制造网络虚假信息，由人工智能制造的高级谣言工具，可以传播虚假的政治信息，并通过算法在社交媒体上进行微观定位，让宣传显得更有说服力。这破坏了民主制度的根基，即公民的认知安全。人们无法确定什么是事实，也无法据此采取行动。

贝尔菲尔德说：“在过去的几年里，我们看到了过滤信息导致的社会思潮和行动，人们被各种各样的算法所误导，开始相信各种各样的阴谋论，即使这些不是完全意义上的阴谋论，也只是部分真相。”“你可以想象，事情会变得越来越糟，尤其是深度造假之类的事情，直到我们越来越难以作为社会群体，决定哪些是事实，是我们必须做的，然后采取集体行动。”

先发制人的措施

由贝尔菲尔德和来自14个机构的25位作者撰写的《恶意使用人工智能》报告预测，这样的趋势将使政治安全受到更加严重的威胁，并在未来几年新的威胁不断出现。尽管如此，贝尔菲尔德说他的工作让他充满希望，而积极的方面，比如关于人工智能的民主的讨论和政策制定（例如，欧盟考虑在公共场所暂停面部识别），让我们对避免灾难性的命运仍然可以保持乐观。

戴维也同意这个说法。“我们现在需要决定：使用人工智能，怎样是可接受？怎样是不可接受的？”“我们需要小心，不要让它控制我们的这么多基础设施。如果我们给警察配备了面部识别系统，而联邦政府因此可以收集我们的所有数据，那是个糟糕的开始。”

如果你对人工智能是否有如此强大的力量仍持怀疑态度，不妨想想核武器即将被发明前的世界。在第一次核链式反应的三年前，即使是试图实现这一目标的科学家也认为这是不可能的。人类也没有为核能突破做好准备，在各种条约和协定出台，限制这种致命武器在全球扩散之前，幸好没有发生巨大的灾难，而那时，人类是徘徊在“相互毁灭”的边缘。我们应将历史教训与远景结合起来，为发明某种强大的技術做好准备。我们可以在人工智能方面做同样的事情。