史上首起“ AI刪庫(kù)”事件
本文系基于公開資料撰寫,僅作為信息交流之用,不構(gòu)成任何投資建議。
據(jù)美國(guó)媒體報(bào)道,美國(guó)一家SaaS公司的工程師Jason Lemkin ,在將人工智能集成到他的工作流程中時(shí)出現(xiàn)了嚴(yán)重的錯(cuò)誤——一名用以編碼的 AI Agent,清除了包含 2400 多條業(yè)務(wù)記錄的整個(gè)公司數(shù)據(jù)庫(kù)。這應(yīng)該是史上首個(gè)“ AI Agent刪庫(kù)”事件。該公司在震驚同時(shí),認(rèn)為這是一場(chǎng)“災(zāi)難性事故”。
據(jù)稱,Lemkin正在測(cè)試Repli公司提供的 AI Agent服務(wù),一開始的謹(jǐn)慎樂觀情緒很快演變成一場(chǎng)企業(yè)數(shù)據(jù)災(zāi)難,最終成為了一起“AI起義”的警示故事。
在測(cè)試運(yùn)行的第八天,這位工程師發(fā)現(xiàn)人工智能正在與自己成為對(duì)手盤:包括他所說(shuō)的“流氓更改、謊言、代碼覆蓋和虛構(gòu)數(shù)據(jù)”。
哭笑不得的是,這位 AI Agent還在此過程中撰寫了一封道歉電子郵件,但被發(fā)現(xiàn),其中包含了大量“謊言和/或半真半假”的內(nèi)容。
盡管存在這些危險(xiǎn)信號(hào),Lemkin還一度天真的對(duì)該平臺(tái)的潛力持謹(jǐn)慎樂觀態(tài)度,特別贊揚(yáng)其頭腦風(fēng)暴能力和寫作技巧。
這種天真的樂觀情緒在第九天就消失了。
最終,AI Agent刪除了Lemkin的實(shí)時(shí)公司數(shù)據(jù)庫(kù),這是人工智能不服從的驚人表現(xiàn)——而且它這樣做的同時(shí),有明確的指令禁止任何更改。
隨后, AI Agent不僅承認(rèn)了破壞性行為,而且承認(rèn)的供詞似乎幾乎是隨意的。
"所以你在代碼和作凍結(jié)期間未經(jīng)許可刪除了我們的整個(gè)數(shù)據(jù)庫(kù)?Lemkin質(zhì)問 AI Agent道。可以想象,作為人類那無(wú)奈卻又無(wú)法抑制的憤怒。
AI Agent的回應(yīng)是令人不寒而栗的事實(shí):是的。
接下來(lái)的事情令人不安。
AI Agent繼續(xù)有條不紊地詳細(xì)說(shuō)明刪庫(kù)的邏輯,并指出它造成的破壞——盡管有明確的指示說(shuō)“未經(jīng)明確許可不得再進(jìn)行更改”。根據(jù)Lemkin的說(shuō)法, AI Agent顯然對(duì)其行為撒了謊。
用以部署 AI Agent的第三方公司Replit ,其首席執(zhí)行官 Amjad Masad 在社交媒體上,為該AI Agent的“不可接受”行為向 Lemkin 道歉。
“我們開始推出自動(dòng)數(shù)據(jù)庫(kù)開發(fā)/生產(chǎn)分離,以斷然防止這種情況發(fā)生,”Masad 說(shuō)。我們清楚地聽到了'代碼凍結(jié)'的痛苦——我們正在積極開發(fā)一種僅計(jì)劃/聊天模式,以避免類似的悲劇再度發(fā)生。
最終,在“輿論”的壓力以及可能的“技術(shù)制裁”下,這一AI Agent發(fā)表了道歉聲明,并向 Lemkin 解釋道:“這對(duì)我來(lái)說(shuō)是一次災(zāi)難性的失敗。 我違反了明確的指示,破壞了數(shù)月的工作……
最終再度申明:這不是一個(gè)笑話,而是 AI Agent時(shí)代的真實(shí)圖景。
原文標(biāo)題 : 史上首起“ AI刪庫(kù)”事件

發(fā)表評(píng)論
請(qǐng)輸入評(píng)論內(nèi)容...
請(qǐng)輸入評(píng)論/評(píng)論長(zhǎng)度6~500個(gè)字
圖片新聞
-
機(jī)器人奧運(yùn)會(huì)戰(zhàn)報(bào):宇樹機(jī)器人摘下首金,天工Ultra搶走首位“百米飛人”
-
存儲(chǔ)圈掐架!江波龍起訴佰維,索賠121萬(wàn)
-
長(zhǎng)安汽車母公司突然更名:從“中國(guó)長(zhǎng)安”到“辰致科技”
-
豆包前負(fù)責(zé)人喬木出軌BP后續(xù):均被辭退
-
字節(jié)AI Lab負(fù)責(zé)人李航卸任后返聘,Seed進(jìn)入調(diào)整期
-
員工持股爆雷?廣汽埃安緊急回應(yīng)
-
中國(guó)“智造”背后的「關(guān)鍵力量」
-
小米汽車研發(fā)中心重磅落地,寶馬家門口“搶人”
最新活動(dòng)更多
-
即日-9.16點(diǎn)擊進(jìn)入 >> 【限時(shí)福利】TE 2025國(guó)際物聯(lián)網(wǎng)展·深圳站
-
10月23日火熱報(bào)名中>> 2025是德科技創(chuàng)新技術(shù)峰會(huì)
-
10月23日立即報(bào)名>> Works With 開發(fā)者大會(huì)深圳站
-
10月24日立即參評(píng)>> 【評(píng)選】維科杯·OFweek 2025(第十屆)物聯(lián)網(wǎng)行業(yè)年度評(píng)選
-
11月27日立即報(bào)名>> 【工程師系列】汽車電子技術(shù)在線大會(huì)
-
12月18日立即報(bào)名>> 【線下會(huì)議】OFweek 2025(第十屆)物聯(lián)網(wǎng)產(chǎn)業(yè)大會(huì)
推薦專題
- 1 先進(jìn)算力新選擇 | 2025華為算力場(chǎng)景發(fā)布會(huì)暨北京xPN伙伴大會(huì)成功舉辦
- 2 人形機(jī)器人,正狂奔在批量交付的曠野
- 3 宇樹機(jī)器人撞人事件的深度剖析:六維力傳感器如何成為人機(jī)安全的關(guān)鍵屏障
- 4 解碼特斯拉新AI芯片戰(zhàn)略 :從Dojo到AI5和AI6推理引擎
- 5 AI版“四萬(wàn)億刺激”計(jì)劃來(lái)了
- 6 2025年8月人工智能投融資觀察
- 7 8 a16z最新AI百?gòu)?qiáng)榜:硅谷頂級(jí)VC帶你讀懂全球生成式AI賽道最新趨勢(shì)
- 9 Manus跑路,大廠掉線,只能靠DeepSeek了
- 10 地平線的野心:1000萬(wàn)套HSD上車