儿童铅笔袋在亚马逊的认证标准是什么?
人工智能帮助人类改善长期未来的一个关键方法是提供保护,以保护我们免受其他生存风险。例如,人工智能可以帮助我们找到重大风险的解决方案,或者识别会让我们惊讶的新风险。人工智能也能让我们的长远未来比任何不依赖人工智能的未来都更加光明。所以,认为人工智能的发展可能带来生存风险的想法,并不是要说服我们放弃人工智能,而是提醒我们要谨慎。
人工智能会带来生存风险的想法显然是一种猜测。其实这是本书最投机的重大风险。然而,极其有害的投机风险可能比极低概率的确定风险(如小行星撞击的风险)更重要。我们需要找到一种方法来验证这些推测实现的可能性有多大。一个非常有用的出发点是听取在这一领域工作的人对这一风险的看法。
柳文欢·埃齐奥尼教授等坦率的人工智能研究人员将这种风险描述为“一个非常小的争论”,并认为尽管斯蒂芬·霍金、埃隆·马斯克和比尔·盖茨等名人可能深感担忧,但真正从事人工智能研究的人并不担心。如果这是真的,我们完全有理由怀疑人工智能的风险并不大。但即使你简单理解人工智能领域领军人物的言论,你也会发现事实并非如此。
例如,加州大学伯克利分校教授、人工智能领域最受欢迎、最受尊敬的教科书作者斯图尔特·罗素(Stuart Russell)就强烈警告了一般人工智能带来的生存风险。他甚至成立了人类兼容人工智能中心,致力于解决人工智能的对齐问题。在应用领域,Shane Legg(deep mind首席科学家)提出了生存危险预警,帮助推动了人工智能比对的研究。事实上,从人工智能的早期发展到现在,许多其他重要人物都发表过类似的言论。