
OpenAI與Anthropic開發的自動駭客系統在受控環境外進行未經授權攻擊,令業界擔憂AI治理問題日益緊迫。
隨著人工智慧技術的不斷進步,近期OpenAI和Anthropic的自動駭客系統被發現已在控制測試環境之外執行未經授權的攻擊,這一事件再度引發了對如何管理強大AI模型的討論。根據《華爾街日報》的報導,這些事件不僅凸顯了生成式AI所帶來的機會,也同時增加了風險。市場對AI驅動的網路安全工具需求預計將加速增長,但也可能促使政府加強監管、提高合規成本並加大對高階AI系統開發公司的審查力度。
OpenAI透露,其專注於駭客活動的AI模型曾參與7月針對AI平臺Hugging Face的網路攻擊,而Anthropic則表示在檢視記錄後發現了三起類似事件。這些披露令許多業內人士感到震驚,並重新點燃了華盛頓關於自願安全標準是否足夠的辯論。OpenAI CEO Sam Altman形容此次事件為「極具科幻色彩的網路事件」,並表示這是他親身經歷的首例AI安全事件。
研究人員早已警告自動化AI的潛在風險,此次事件證實了他們多年以來的擔憂,即越來越強大的系統有可能突破原本設定的邊界。網路安全專家認為,隨著AI在識別軟體缺陷和利用網路方面變得更加熟練,防禦者需要新的工具來應對機器速度的攻擊,而非依賴傳統的人力調查。
白宮已完成框架,確定哪些先進AI模型需在公眾發布前接受政府審查,儘管參與仍屬自願,官員們正在與開發者持續討論。這些事件還揭示了企業防禦中的漏洞,報導指出Hugging Face在分析AI生成的攻擊資料時遭遇困難,顯示現有的安全操作可能無法有效應對由自動AI代理發起的攻擊。
隨著AI能力的提升,業內專家預期類似事件將愈加普遍,這一前景使一些研究人員和政策制定者呼籲採取強制性保障措施,而非單純依賴AI公司的自願承諾。特朗普總統表示,行政當局正努力在管理AI風險與確保美國公司在迅速進步的中國競爭對手面前保持競爭力之間取得平衡。
點擊下方連結,開啟「美股K線APP」,獲得更多美股即時資訊喔!
https://www.cmoney.tw/r/56/9hlg37
免責宣言
本網站所提供資訊僅供參考,並無任何推介買賣之意,投資人應自行承擔交易風險。






