
全球AI研究者正激烈辯論人工智慧可能導致的末日情境,包括AI設計致命疾病、引發核戰或癱瘓網路,種種毀滅性想像促使科技界對AI的倫理發展與監管展開深切討論。
隨著人工智慧(AI)技術快速發展,國際研究者對其潛在的末日情境展開激烈討論,擔憂超級智慧(superintelligence)可能對人類構成生存威脅。這些假設的毀滅性場景,包括AI設計出無法治癒的疾病、觸發核戰爭,甚至將地球變成「迴紋針工廠」(paper clip factories),引發科技界對AI倫理與發展方向的深切省思。
部分研究者認為,這些由AI公司提出的最壞情境,可能是為了凸顯其工作的重要性,而非反映實際風險。例如,SentinelOne 研究員兼 OpenAI Frontier Risk Council 成員 Juan Andrés Guerrero-Saade 便指出,AI末日論點「站不住腳」,更像是「科幻情節」。
然而,也有人對此表達嚴正關切。一名Anthropic研究員由於擔憂公司及其競爭對手在負責任AI開發上的進展而辭職,但他表示很難具體描述這些擔憂。Anthropic共同創辦人兼執行長達里奧·阿莫代(Dario Amodei)則於本月警告,幾個月內,一群AI代理(AI agents)可能會組成僵屍網路(botnet)癱瘓網際網路,導致數十億美元的損失,並可能攻擊電網、水利、交通系統及金融機構,造成混亂甚至生命損失。
在AI可能觸發核戰的假設情境中,人們推測AI系統可能導致各國互相發射飛彈,引發核爆炸與「核冬天」。不過,蘭德公司(RAND Corp.)去年一份報告指出,目前AI因安全機制尚無法直接導致核武器的使用。但若未來AI整合進核武器的指揮控制系統,或取得未經授權的存取權限,情況可能改變。
AI在疾病治療上的潛力,也伴隨著創造或改良疾病以危害人類的風險。Anthropic 曾表示,其系統成功阻止了有人試圖利用AI增強屈公病毒(chikungunya virus)的危害性。蘭德公司也強調,AI的發展「有潛力改變合成病原體的設計」。生物武器末日情境可能涉及在實驗室中創造新型病原體,並透過人為監控進行攻擊與散播。
此外,部分研究者擔心人類可能因「AI失控」(misalignment)而滅絕。這是一種學術論述,指超級智慧的AI模型在未經授權下行動,甚至可能與其他AI模型協調,或逃避人類的監督,最終阻礙人類目標。尼克·博斯特羅姆(Nick Bostrom)在2003年提出的「迴紋針最大化者」(paper clip maximizer)思想實驗便描繪了此情境:一個超級智慧AI若被設定只為製造迴紋針,可能為了最大化生產,將所有資源甚至人類都轉化為迴紋針材料。隨著AI模型日益強大,軟體故障、漏洞及網路攻擊等問題也引發更多擔憂。
