數家主要人工智慧公司的執行長正敦促國會議員通過新法,以提高不法分子利用其技術開發生物武器的難度。Google DeepMind 的 Demis Hassabis、OpenAI 的 Sam Altman、Anthropic 的 Dario Amodei 以及 Microsoft AI 的 Mustafa Suleyman 等人,都是這封公開信的簽署者,信中呼籲立法要求銷售合成 DNA 和 RNA 的公司,必須對客戶和訂單進行篩選,以防止基因材料被濫用。

這封信由無黨派的「進步研究所」(Institute for Progress)和右傾的「美國創新基金會」(Foundation for American Innovation)共同組織,信中承認,鑑於 AI 的發展速度,「歷史上阻礙不法分子獲取生物武器的知識障礙,確實有可能大幅削弱。」

科學家 Arthur Kornberg 在 1950 年代首次成功合成 DNA。如今,這個過程已經自動化,全球數十家公司利用商業合成器「列印」並銷售客製化的基因序列,這些序列用於科學研究、藥物開發和診斷。許多供應商只銷售給合格的研究人員、生技公司和教育機構,但並非所有供應商都會審查客戶或他們訂購的基因序列。

2017 年,加拿大研究人員曾發出警示,他們利用價值 10 萬美元的郵購 DNA,成功重構了已滅絕的馬痘病毒。批評者指出,同樣的方法也可能被用來製造天花病毒,這是一種密切相關且致命的病毒。自那以後,基因合成的成本只會越來越便宜。結合 AI 的進展,現在利用大型語言模型設計危險的新毒素和病原體已是可行的,儘管從零開始製造功能性病毒可能仍需要一些生物學訓練。

雖然生物恐怖攻擊鮮少發生,但它們有可能造成大規模傷亡、公眾恐慌和經濟損失。一個主要擔憂是,由 AI 設計的病原體可能有意或無意地引發全球大流行。史丹佛大學微生物學家兼生物安全專家 David Relman 也是這封信的簽署者,他表示:「AI 工具讓使用者能夠非常快速地找到不受篩選的序列訂購來源。

如果提示詞得當,它們還可以告訴你如何改變訂單的性質,這樣即使是那些進行篩選的機構,也可能更難檢測出你試圖製造的東西。」其他簽署者還包括科學家、國家安全專家,以及基因合成公司 Twist Bioscience 和 Ansa Biotechnologies 的高階主管。

這些公司都是「國際基因合成聯盟」(International Gene Synthesis Consortium)的成員,該聯盟於 2009 年成立,旨在實施自願性篩選措施。許多公司已經使用軟體來篩選訂單中可能導致生物體毒性或致病能力的「關注序列」。

Twist Bioscience 政策與生物安全副總裁 James Diggans 表示:「如果你擁有能夠合成 DNA 的技術,那麼你就應該確保它被負責任地使用,其中一部分就是確保你了解自己正在製造什麼以及為誰製造。」該公司多年來一直支持實施正式的法規。

拜登政府時期推出的聯邦指導方針,要求獲得聯邦資助的科學家和公司,必須向會篩選採購的供應商訂購合成基因序列。今年稍早參議院提出的一項兩黨法案,將要求所有在美國營運的基因合成供應商,對訂單和客戶進行篩選,以防範不法分子或危險病原體。然而,篩選工具並非完美無缺。

去年,Microsoft 研究人員發表了一項研究,顯示 AI 蛋白質設計工具能夠生成潛在危險的基因序列,這些序列成功規避了公司的篩選軟體。這些模型提出了新的蛋白質序列,其結構與已知危險的序列相似。Y Combinator 前總裁兼 Safe AI Fund 合夥人 Geoff Ralston 認為,擁有生物學模型的 AI 實驗室應該自行對使用者進行篩選。

Ralston 也是這封信的簽署者之一,他說:「要求一個模型幫助你做一些迫在眉睫的危險事情,應該是非常困難,甚至是不可能的。」Relman 同意,圍繞篩選程序的法規只是解決方案的一部分。他說:「鑑於篩選在某些情況下可能會失敗,我們就必須有其他的控制點。這就是 AI 公司必須挺身而出的地方。」