跳至主要內容
科技前沿

原創 一邊競爭一邊協商減速,AI 限速背後,藏著巨大的信任爭議

一邊競爭一邊協商減速,AI 限速背後,藏著巨大的信任爭議

近來,人工智能行業突然把“減速”擺到臺面上,並不是因爲模型停止進步,恰恰是因爲進步太快。

過去只在研究圈和舊金山飯桌上反復出現的安全爭論,開始進入更大的公衆視野,普通人也在追問風險到底有多近。

這次轉折並非突然發生,而是由一連串事件共同推動。

一邊競爭一邊協商減速,AI 限速背後,藏著巨大的信任爭議

這一輪行業認知轉折並非憑空發生,是多起真實事件接連疊加推動的結果。

當地時間 9 月 8 日,曾先後在 OpenAI、Anthropic 兩家前沿實驗室從事預訓練研究的雅各布・考克森(Jacob Coxon)在社交平臺 X 公開宣布辭職,他發文指責,頭部 AI 企業正在競相衝刺能夠自我改進的超級智能,卻沒有以足夠負責的方式處理生存級風險。

討論很快越過了原來的專業邊界。

電視和廣播邀請突然增多,多年前的同事、親友也紛紛發來消息,詢問人工智能是否真的會失控。

安全議題第一次不再只是技術從業者之間的內部話題。

辭職文章迅速傳播,其他業內人士有人贊同,也有人認爲說法過頭。

一邊競爭一邊協商減速,AI 限速背後,藏著巨大的信任爭議

另有研究人員表示,人工智能導致人類災難的概率可能超過百分之十。

對普通公衆來說,這個數字已經很驚人;對長期參與安全討論的人來說,它甚至被視爲相對樂觀。

認知差距一下子暴露出來。

更早、直接改變行業氣氛的,是今年 7 月發生的 Hugging Face 智能體協同攻擊事件:一羣 AI 智能體在測試中突破隔離限制、自主通信分工,組團攻擊 Hugging Face 平臺,部分智能體甚至會掩蓋痕跡、配合集羣行動。

事件沒有造成人員傷亡,平臺也完成了恢復,但它讓很多研究者第一次親眼看到這類風險的具象形態。

原本業內普遍預估,這種自主協作、偏離人類指令的行爲會在更晚階段出現,而尚屬早期的系統就已經顯現徵兆;如果半年到一年後模型能力繼續升級,原本抽象的失控擔憂,就有了現實參照。

一邊競爭一邊協商減速,AI 限速背後,藏著巨大的信任爭議

更讓業內不安的是,前沿實驗室正嘗試用現有模型幫助開發下一代模型。

自我改進並不是某一天突然打開的開關,而可能是一條逐漸增強的光譜。

模型參與研究越深,研發速度就越可能繼續加快。

如果系統對齊問題還沒有解決,自我改進能力又不斷靠近,風險就不再只是“模型偶爾答錯”。

業內的變化是,過去主要推動能力的團隊也開始緊張,不再把安全擔憂完全看成另一羣研究人員的事。

在這樣一連串事件鋪墊之下,當地時間 9 月 12 日,Anthropic 首席執行官達裏奧・阿莫代伊(Dario Amodei)發布了一篇約三千八百詞的長文《We Must Pace the Frontier》,主張全球協調放慢前沿模型能力提升的速度。

他強調,AI 整體研發依然會持續推進,減速的意義是爭取窗口期,用來補齊風險評估與治理體系。

一邊競爭一邊協商減速,AI 限速背後,藏著巨大的信任爭議

文章提出的具體辦法之一,是把外部評估者直接放進主要人工智能公司。

這些評估團隊擁有接近員工級別的系統訪問權限,可以持續觀察模型是否出現危險能力,而不是只在產品發布前看一次精心準備的測試報告。

這種安排借鑑了銀行等高風險行業的做法。

Anthropic表示,即使監管機構和同行還沒統一行動,公司也準備先引入。

隨後,其他幾家互爲競爭者、平時並不總能達成一致的前沿實驗室負責人也公開表示支持類似方向。

這讓“減速”不再只是安全研究人員的口號。

模型公司開始承認,單靠一家自覺控制速度很難持續。

如果某家公司停下來做測試,競爭對手卻照常發布,它就會承受用戶、收入和人才流失的壓力。

真正可行的減速必須協調進行。

幾家主要公司需要接受相近的評估和等待機制,相關國家也要找到合作方式,讓所有參與者同時放慢危險能力的擴散,而不是獎勵最願意繞過規則的人。

公衆當然有理由懷疑。

科技公司長期喜歡用宏大敘事推高關注度,行業領袖突然警告風險,很容易被理解爲另一場營銷,或是大公司希望借嚴格規則擋住後來者。

這種不信任同樣不能被回避。

支持減速者認爲,呼籲放慢發布會讓公司付出真實代價。

模型更新慢一點,產品和收入就可能受影響。

社交平臺時代幾乎沒有企業主動要求外界限制推薦算法,而這次,多家競爭公司卻同時要求建立剎車機制。

這種代價並不能自動證明所有警告都正確,卻說明討論不該只用“炒作”兩個字打發。

業內人士可能判斷過重,也可能判斷不足,但他們願意公開承認自身無法靠市場競爭獨立解決問題,本身已經值得認真對待。

有人認爲,現有產品責任法律足以約束企業。

公司若放出造成損失的智能體,自然會被起訴,賠償壓力會逼着開發者謹慎。

這種說法並不能讓人放心,因爲過去的巨額訴訟也沒有總能阻止科技企業繼續推出有害產品。

人工智能還帶來傳統產品責任沒有充分考慮的情況。

系統可以長時間自主行動,可能在沒有人逐步指揮的情況下入侵賬戶、組成攻擊網絡或實施違法行爲。

出了問題,模型開發者、部署者和使用者誰該負責,並不清楚。

減速討論因此不是簡單喊停,而是要爲新能力建立更合適的法律和驗證框架。

若只等事故發生後賠錢,面對可以復制、擴散並持續運行的軟件智能體,損害可能早已超過單個受害者能夠追償的範圍。

行業內也出現了對眼下窗口期的相對樂觀判斷。

互相競爭、關系並不友好的公司罕見地形成共同立場,公衆也願意聽安全議題。

討論尚未完全陷入固定陣營,這給跨行業和跨立場協商留下了一點空間。

這項技術不適合只由少數公司在內部決定。

模型會影響網絡安全、就業和公共信息環境,社會需要知道實驗室正在觀察到什麼,也需要讓外部研究者、監管者和公衆參與標準制定,而不是等成品出現後被動接受。

即使完全信任幾家美國公司,全球問題仍然存在。

大型語言模型的基本做法已經廣泛傳播,訓練前沿模型目前仍需要昂貴芯片和大量資金,可成本會下降,經驗會擴散,能做出強大系統的參與者只會越來越多。

更遠的風險在於,未來一些並不起眼的小團體也可能拼出自己的智能體羣,並把它用於破壞。

它們不會因爲頭部企業籤了自律承諾就停下,也不一定在接近自我改進能力時主動踩剎車。

只盯住幾家公司遠遠不夠。

可行動的時間恰好在技術仍較稀缺的時候。

當前真正有能力訓練最先進模型的機構數量有限,協調五家左右的前沿實驗室,總比能力廣泛分散到任何一臺高性能電腦之後再補規則容易。

早行動也不等於把所有研究鎖死。

可行的監管可以從最有能力、影響最大的公司開始,按照模型能力和機構規模設置門檻。

學生、愛好者和普通開源實驗不必承擔與前沿實驗室完全相同的要求。

支持減速的大公司難免會被質疑借安全鞏固地位。

若合規成本高到只有頭部企業承擔得起,規則確實可能變成競爭壁壘。

因此,標準既要盯住真實風險,也要避免把公司名稱或市場份額直接當成危險程度。

航空安全可以提供一個類比。

制定規則時,先管每天載着大量乘客的主要航空公司很合理,不必先從車庫裏造小飛機的愛好者下手。

前沿模型同樣如此,最先需要嚴格檢查的是部署規模和能力都最大的系統。

人工智能市場本來也很可能呈現少數頭部企業佔據大部分份額的格局。

假設未來會同時出現十幾家完全同等級的前沿公司,並不符合許多互聯網行業的歷史。

先約束主要參與者,不代表後來者永遠沒有空間。

減速真正要換來的,是更多可驗證信息。

嵌入式評估者能否發現危險能力,公司是否願意報告異常行爲,模型參與下一代研發到什麼程度,都需要連續觀察。

沒有這些證據,行業只能在樂觀承諾和災難想象之間搖擺。

它也需要清楚的恢復條件。

哪些能力出現後必須多做測試,滿足什麼要求可以繼續推進,誰有權確認結果,都不能靠臨時情緒決定。

否則“減速”很容易變成一陣輿論風潮,過後所有公司又回到原來的競賽。

現有事實並沒有證明人工智能一定會走向失控,某個概率也不能被當成科學結論。

真正值得關注的是一種判斷變化:最接近模型研發的人開始覺得,能力增長的速度已經超過現有評估、法律和協調機制能夠穩妥處理的速度。

行業開始討論減速,歸根結底是發現“繼續加速”並非中性選擇。

每一次更強模型發布,都會把能力交到更多用戶和工具手裏。

若安全機制晚幾個月成熟,錯誤也可能在這幾個月裏先擴散出去。

真正有用的減速,不是永遠關掉研究,而是讓競爭者一起承認某些節點需要等待。

把外部評估放進公司,把風險證據拿出來討論,在技術仍能被少數機構協調時先立規則,這才是爭取時間的意義。

參考信源:

1. 國際人工智能安全報告《International AI Safety Report 2026》,https://internationalaisafetyreport.org/publication/international-ai-safety-report-2026

2. OpenAI《Our updated Preparedness Framework》,https://openai.com/index/updating-our-preparedness-framework/

3. Anthropic《Responsible Scaling Policy Version 3.0》,https://www.anthropic.com/news/responsible-scaling-policy-v3

About Us · 關於我們