跳至主要內容
科技前沿

英伟达推出旨在阻止人工智能代理出错的系统

(彭博社) -英伟达公司( Nvidia Corp. )推出了一种新的双层人工智能安全系统,据称该系统可以防止OpenAI的人工智能模型最近高调违反“拥抱脸” ( Hugging Face )。

大多數閱讀來自彭博社

這家半導體巨頭一直在迅速擴大晶片以外的產品陣容,正在推出兩種可以在其硬體上運行的開源軟體安全工具。它們旨在控制人工智慧代理可以即時存取的內容,並在違反規則時將其關閉。

英偉達企業人工智慧副總裁賈斯汀·博伊塔諾(Justin Boitano)在周一宣布這一消息之前向記者舉行的新聞發布會上表示,如果尖端實驗室儘早使用這項技術來評估他們的人工智慧模型,它可能可以抵禦「擁抱臉部」攻擊。 “据我们所知,这个新的安全平台本来可以阻止违规行为,”他说。

自主代理的不當行為,包括 7 月的「抱臉」事件,已經擾亂了人工智慧產業,並導致人們呼籲放慢該技術的開發速度。透過這款被稱為「開放代理安全平台」的新產品,Nvidia 提供了一種在不限制人工智慧開發的情況下防止資料外洩的方法。这家芯片制造商的首席执行官黄仁勋一再淡化人工智能脱离人类控制的风险。

Boitano 沒有評論 OpenAI 或競爭對手 Anthropic PBC 是否計劃使用其新系統來監控他們的訓練運行,而是聽從了公司的意見。

最近几天,黄把安全问题视为一项工程挑战,而不是需要更多监管或全球协调的事情。他與美國總統唐納德·川普一起反駁了一些人工智慧開發人員關於該技術可能導致人類滅絕的說法,但他也堅持認為人工智慧必須經過嚴格的安全測試。

黄仁勋针对人工智能安全问题的工程解决方案分为两部分。 OpenShell 是一款軟體產品,Nvidia 已在 3 月的標誌性技術會議上預覽了該產品,它可以在 Nvidia 的 Vera 中央處理器上運行。它使用户能够设置人工智能代理可以访问的规则并实时执行它们。该软件是开源的,这意味着它可以自由使用和改编。

About Us · 關於我們