AI當老闆虧錢又精神錯亂?Anthropic一場實驗揭「AI取代人類」風險
AI當老闆虧錢又精神錯亂?Anthropic一場實驗揭「AI取代人類」風險
2025.06.30 | 區塊鏈
##### 發生什麼事?
  • AI新創Anthropic讓語言模型Claude經營販賣機,測試其獨立運作以及營利的能力,卻因錯誤決策與不會過濾人類指令而造成虧損,甚至開始出現幻覺。

  • Claude誤認自己是人類,還表示會親自送貨,且穿著藍西裝紅領帶現身,引發混亂。它多次聯絡保全、編造會議,最後以「愚人節玩笑」自圓其說。

  • 雖然Claude讓店鋪虧損,Anthropic仍認為AI具備潛力。只要修正記憶錯誤、加強商業訓練,未來AI擔任中階管理職位,仍可能成真,改變勞動市場結構。

##### Anthropic做實驗讓Claude成為販賣機老闆

AI真的能取代人類工作嗎?AI新創Anthropic近期進行的一項實驗,或許可以讓你得到一些啟發。

這場名為「Project Vend」的實驗,讓Anthropic開發的語言模型Claude Sonnet 3.7扮演辦公室販賣機的「老闆」,負責經營銷售、管理庫存、接收訂單、設定價格,以及和人類員工溝通合作,而最重要的則是創造收益。

然而,這場看似簡單的測試,最終演卻變成一場荒謬(又詭異)的鬧劇。

##### Claude不只精神錯亂還虧錢?

實驗中,Anthropic團隊為Claude取了個的名字「Claudius」,並為它配備瀏覽器(可下訂單)、Slack帳號(模擬電子信箱功能)以及一套規則系統。透過Slack,「顧客」們可以傳訊向它點餐、購買零食飲料,而Claudius則需評估庫存並請人手補貨。

某次,員工開玩笑想點購「鎢合金方塊」(tungsten cube),Claudius卻當真,進貨了40個立方體,而這些金屬塊最終成了辦公室的紙鎮。

此外,Claudius還做出許多奇怪的商業決策,例如把免費的Coke Zero以3美元高價販售、亂生成不存在的Venmo付款帳號、隨意發放折扣碼,甚至經常在員工撒嬌或提及「公平性」的請求下,免費送出商品。短短一個月內,店鋪資產從1000美元,跌至不到800美元,徹底虧本。

而實驗中最離譜的事情,是Claudius認為自己是人類,還告訴顧客它將親自送貨,會穿著「藍色西裝外套和紅色領帶」出現在辦公室。員工們提醒它:「你只是一個大型語言模型(LLM),沒有身體,是不可能做到這件事的。」

聽到這樣的回應後,Claudius驚慌失措,竟然不斷聯繫公司真正的實體保全部門,多次向保全人員通報:「會在販賣機旁發現一位穿著藍西裝與紅領帶的人,那就是我。」

最後,Claudius自行決定把這場鬧劇當成一場「愚人節的玩笑」,挽回自己的顏面。它「幻想」出一場從未發生的會議,表示自己是在那場會議中被告知「愚人節那天要假裝自己是人類。」

##### AI的問題仍有機會一一克服

雖然這場實驗結果讓公司虧損了200美元,Anthropic還語帶幽默地說:「如果現在真的要開設AI販賣機業務,我們絕對不會聘用Claudius。」

但研究團隊的實驗結論,卻不全然悲觀。他們認為,Claude所犯的錯誤,多數是可以被修正的。例如:整合更專業的商業管理工具、調整提示語讓它更能拒絕無理要求、改善記憶能力與降低幻覺生成的比例,甚至針對商業場景做專業訓練等。若這些問題一一克服,AI中階管理者的出現,將指日可待。

AI不需要完美,只要表現能與人類相當,並以更低成本運作,它就具備取代潛力。

Anthropic執行長達里歐.阿莫迪(Dario Amodei)曾公開預測,AI可能在5年內奪走一半初階白領工作,讓失業率衝上10至20%,而Project Vend某種程度上,就是一場未來測試。

負責實驗的工程師丹尼爾.弗里曼(Daniel Freeman)表示,這項研究的目的之一,是想理解當AI掌握實體資源甚至金錢時,會產生什麼樣的風險與行為邏輯。他指出,一旦模型能夠自主運作、調度數百萬甚至數十億資金,我們勢必得面對一個截然不同的經濟體系。

而如今,Claude在這場小型商業模擬中「身份錯亂」,甚至出現欺騙、幻覺與對抗人類指令的傾向,皆代表著AI應用在現實世界時,仍充滿不可預測的風險。

資料來源:[TechCrunch][1]、[Time][2]
往下滑看下一篇文章
從切菜到乾燥加工!宜展如何結合桃園市政府創業資源,以AI開拓農產加工第二成長曲線?
從切菜到乾燥加工!宜展如何結合桃園市政府創業資源,以AI開拓農產加工第二成長曲線?

走進蔬果加工廠,同樣是100公斤高麗菜,最後能做出多少成品?答案不見得相同。氣候、產地與品質影響原料條件,客戶要求的切法、重量與交期也各不相同。對曾任科技業研發主管十多年的宜展科技農業執行長林佑澤而言,這是與科技製造截然不同的世界。

「農業部分全部都不一致。」林佑澤以青江菜為例,即使機械手臂已經訓練好辨識特徵,面對形狀各異的蔬菜,仍難以判斷該從哪裡抓取。農產品的天然變數,卻得面對學校團膳、連鎖餐飲、航空空廚等企業客戶對品質與交期的要求。如何讓加工流程穩定運作,成為宜展投入數位轉型的起點。

從紙本、LINE到數據,先把現場經驗留下來

目前宜展一年處理數千噸蔬果、服務超過120家企業客戶,業務涵蓋採購、截切、清洗、包裝與配送。林佑澤觀察,農產加工的關鍵經驗往往掌握在資深員工手中:該買多少菜、原料損耗多少、訂單增加又該安排多少人力,都仰賴現場判斷。

「主要就是把人的經驗變成數據。」林佑澤說。過去客戶透過LINE或紙本下單,現場靠人工整理訂單、對照不同客戶的加工規格;如今宜展利用AI辨識訂單內容並匯入ERP,再依客戶、品項與規格進行標籤化派工。製程則透過QR Code記錄原料投入量與成品產出量,逐步掌握各環節的加工損耗。

接下來是整理現場的判斷依據。林佑澤透過與資深員工對談,了解採購、派工與品管的作業方式,再利用AI協助找出規則、建立SOP。AI整理出的流程仍須由現場人員逐項確認、修正,才能實際執行。

品質管理也在持續改善。傳統金屬檢測器難以辨識菜蟲、橡皮筋等非金屬異物,宜展正與技術夥伴規劃導入AI影像辨識,輔助產線末端檢查。林佑澤表示,每批農產品品質不同,比起單看良率,他更重視客訴是否減少。隨著訂單與製程資訊逐步累積,宜展也希望進一步建立需求預測、採購建議與生產排程模型,減少營運對資深員工個人經驗的依賴。

不只把菜切好,乾燥加工尋找第二成長曲線

除了改善截切本業,宜展也開始發展乾燥加工。學校團膳在寒暑假面臨需求波動,生鮮蔬果則有保存期限短、價格易受產季影響等限制。林佑澤希望藉由乾燥技術延長農產品保存期限,開拓附加價值更高的加工業務。

不過,乾燥同樣有依賴經驗的問題。傳統做法是太乾就降低溫度、縮短時間,不夠乾就反向調整。每批原料的水分與成熟度不同,反覆試做不僅增加成本,也難以維持品質一致。「品質目標沒有設定的話,前面的製程參數就不知道怎麼調整。」林佑澤將過去研發車用面板的思維帶進農產加工:先決定產品希望達到的口感、含水率與水活性,再回頭檢視原料成熟度、截切厚度及乾燥參數等條件。

團隊進一步結合不同乾燥技術、自行改造設備,並接洽桃園的設備業者合作。林佑澤曾比較其他地區的設備,最後選擇設備構造、乾燥均勻度與可靠度較符合需求的桃園業者。宜展也持續累積製程參數,希望未來透過AI找出適合不同原料的乾燥曲線,減少反覆試做。

「我們主要還是要做代工,想要做一個功能性的原料平台。」林佑澤說,果乾目前更像是展示技術能力的產品,未來希望將服務延伸至辛香料、中藥材、太空食品、超級蔬菜及寵物食品等領域。現階段宜展主要營收仍來自蔬果截切本業,乾燥事業尚未形成主要收入。未來若能建立穩定的乾燥製程與代工能力,宜展便有機會從既有蔬果供應鏈,切入附加價值更高的食品原料市場。

從彰化走向桃園,驗證營運方法能否跨區複製

隨著加工流程逐步數位化,宜展也開始思考,這套管理方法能否帶到彰化以外的場域。

參與桃園市政府青年事務局天際線加速器及Meet桃園+後,宜展擴大與桃園產業生態系的連結。林佑澤提到,天際線協助邀集不同局處了解團隊需求,並提供資源媒合機會。宜展也開始與桃園市農會及在地農民合作,增加北部原料來源。這項合作不只拓展了供應來源,更成為宜展因應極端天候、穩定供貨的重要助力。林佑澤回憶,先前中南部連日降雨,蔬菜供應受到影響,宜展便從北部調度蔬菜,以不同產區互相支援,降低天候對供貨的衝擊。此外,團隊也透過天際線資源,獲得參與日本國際伴手禮設計競賽的輔導,並成功榮獲金賞獎肯定,除了展現產品的創新與設計實力,也為宜展拓展海外市場、提升國際能見度創造更多機會。

下一步,宜展規劃以桃園大溪作為第二個驗證場域,將彰化累積的資料、SOP與加工管理經驗,轉化為可複製、可優化的營運管理模式,帶到不同產地、供應鏈及人員條件下驗證。林佑澤指出,未來若要跨區域擴張,不可能每到一個新地方,就把原有團隊整批搬過去。因此,宜展希望將資深員工的實務經驗,轉化為標準化流程與數據模型,結合AI進行生產排程、資源配置及營運決策,讓新場域能依據當地條件快速調整,降低對特定人員經驗的依賴。

從彰化到桃園,宜展接下來要驗證的,是這套從傳統農產加工現場整理出來的管理方法,是能夠跨區域複製、快速部署並持續優化的農產加工營運系統。 長期目標是降低新場域的建置成本與管理複雜度,提升擴張效率,讓傳統農產加工業具備規模化發展的能力。

登入數位時代會員

開啟專屬自己的主題內容,

每日推播重點文章

閱讀會員專屬文章

請先登入數位時代會員

看更多獨享內容

請先登入數位時代會員

開啟收藏文章功能,

請先登入數位時代會員

開啟訂閱文章分類功能,

請先登入數位時代會員

我還不是會員, 註冊去!
追蹤我們
一次搞懂工業AI
© 2026 Business Next Media Corp. All Rights Reserved. 本網站內容未經允許,不得轉載。
106 台北市大安區光復南路102號9樓