ChatGPT是廢文製造機?英國學者揭:AI不在乎真實性,只會生成「看似可信」的文本
ChatGPT是廢文製造機?英國學者揭:AI不在乎真實性,只會生成「看似可信」的文本

重點一:英國學者發表論文主張,大型語言模型(如ChatGPT)產生的錯誤資訊,不應被稱為「AI幻覺」(AI hallucinations),而應正名為哲學意義上的「胡說」(bullshit),因其系統設計本質上對真相漠不關心。

重點二:「AI幻覺」一詞具有誤導性,它暗示模型試圖陳述事實卻失敗,掩蓋了其核心運作機制是「生成看似可信的文本」而非「傳達真相」。這種誤解可能引導錯誤的技術解決方案與公眾認知。

重點三:論文將「胡說」分為兩種:僅對真相冷漠的「軟胡說」(soft bullshit),以及意圖欺騙聽眾、偽裝成真理講述者的「硬胡說」(hard bullshit)。學者認為ChatGPT至少是前者。

針對大型語言模型 (Large Language Models, LLMs) 如 OpenAI 公司的 ChatGPT 頻繁產出不實資訊的現象,哲學學術界提出了一個顛覆性的觀點。

根據英國格拉斯哥大學 (University of Glasgow) 學者Michael Townsen Hicks等人於2024年6月份發表於《倫理與資訊科技》(Ethics and Information Technology) 期刊論文,目前業界與媒體普遍使用的「AI幻覺」(AI hallucinations) 一詞,不僅不精確,更具有高度誤導性。

研究團隊甚至直接將論文標題訂為「ChatGPT is bullshit」(ChatGPT 簡直胡扯),以主張這些看似是模型「感知錯誤」的內容,其本質更應被理解為哲學家哈里·法蘭克福 (Harry Frankfurt) 所定義的「胡說」(bullshit)。

核心論點在於,大型語言模型的設計目標並非傳遞或驗證事實,而是根據龐大的數據資料,計算並生成最可能符合語境、看起來最像人類會說的話。

研究指出,這種運作機制意味著, 系統本身對於其產出內容的真實性「漠不關心」,這正是「胡說」的關鍵特徵:一種完全不在乎真假的言談。 此論點挑戰了當前對AI錯誤的普遍認知,並呼籲對這些系統的能力與意圖進行更準確的描述。

「AI幻覺」一詞的誤導性與潛在風險

本研究並非一項實驗性或量化研究,其主要採用的是哲學分析與概念辨析(Philosophical Analysis and Conceptual Clarification)的方法。研究者深入探討了哲學家哈里・法蘭克福在《論胡說》(On Bullshit)一書中建立的哲學概念 。他們將此哲學理論應用於分析大型語言模型的新興科技現象,深入剖析為何將AI的錯誤資訊標籤為「幻覺」會帶來問題。

研究作者 Michael Townsen Hicks、James Humphries 及 Joe Slater 指出 ,「幻覺」這個詞彙源自人類心理學,暗示著一個主體(AI)在嘗試感知或陳述真實世界時,發生了認知偏差或錯誤。這會讓公眾、政策制定者甚至開發者誤以為,AI的目標是追求真理,只是偶爾會「看錯」或「記錯」。

然而,論文強調,這與大型語言模型的根本架構背道而馳。 AI生成錯誤資訊,並非系統在追求準確性過程中的「異常」或「故障」,反而是其核心預測功能的「正常」展現。模型的唯一目標是依據提示詞 (prompt),生成統計上最合理的下一個詞彙,串連成流暢且具說服力的文本。

因此,無論其產出是事實還是虛構,背後的運作過程完全相同。 研究警告,使用「幻覺」一詞會淡化模型開發者的責任,讓人們將問題歸咎於AI本身,同時可能引導研究人員朝著錯誤的方向尋求解方,例如試圖「修正」AI的感知,而非正視其設計上與生俱來的局限性。

剖析AI的「胡說」:軟性與硬性的層次

為了更精確地描述大型語言模型的行為,論文引用了法蘭克福的哲學概念,並進一步將「胡說」區分為兩個層次:「軟胡說」(soft bullshit) 與「硬胡說」(hard bullshit)

「軟胡說」指的是產出的言論對真實性漠不關心,沒有欺騙聽眾的意圖;「硬胡說」則更進一步,指言說者不僅不在乎真相,還積極地試圖誤導聽眾,讓對方相信自己是在傳遞經過深思熟慮的資訊。

研究團隊認為, ChatGPT 毫無疑問是一個「軟胡說」的產生器。因為無論我們是否將意圖歸於AI,其系統設計本身就缺乏對真相的關心。而它是否構成「硬胡說」,則取決於我們如何看待AI的「意圖」。

若將其設計者的意圖納入考量,亦即創造一個看似能進行有意義對話、實則僅是模仿人類言談的程式,那麼 ChatGPT 的行為便帶有欺騙性質,意圖讓使用者誤以為它是一個關心事實的對話夥伴,這就符合了「硬胡說」的定義。

總結來說,無論層次為何,使用「胡說」一詞能更準確地揭示大型語言模型的本質,提醒使用者對其產出的一切內容保持警惕,因為即使內容恰好為真,也僅是巧合,而非系統追求真相的結果。

都是AI的錯?可能…也不盡然

有趣的是,今年5月份,有另一份論文回應了「ChatGPT is Bullshit」。亞利桑那大學歷史、哲學和宗教研究學院的助理教授Jimmy Licon指出, ChatGPT等LLM之所以會產生「bullshit」,部分原因在於人類本身就常常「bullshit」。 簡單來說,LLM是根據大量人類語言資料訓練而成,因此「bullshit in, bullshit out」。

這份論文主要探討人類「bullshit」的三大動機,包括了維護聲譽(reputation management)、展示自身智慧(signaling intelligence),以及參與「bullshit市場」(marketplace for bullshit)。

Licon強調,上述三大動機促使人們利用LLM(如ChatGPT)來更有效地「bullshit」彼此。換句話說,LLM本身其實不具備意圖,它們僅僅反映了人類語言與行為特徵。 也因此,LLM產生「bullshit」的現象,根源在於人類本身的「bullshit」傾向與社會動機。

延伸閱讀:程式設計快沒飯吃了?AI搶工作掀失業率,理科高材生被迫轉行應徵快餐店員工

台灣第一家香水股!「光速火箭」成立僅十年,年銷逾20萬瓶、營收衝7億元!

資料來源:link.springer.comChatGPT is bullshit

本文初稿為AI編撰,整理.編輯/ 李先泰

關鍵字: #openai #ChatGPT
往下滑看下一篇文章
數位時代 X 國泰金控 從百套系統上雲到 Cloud First:國泰如何把雲端變成AI成長引擎?
數位時代 X 國泰金控 從百套系統上雲到 Cloud First:國泰如何把雲端變成AI成長引擎?

2019年金融監理機關正式將雲端納入委外規範後,揭示金融業上雲時代來臨,國泰金控數數發中心成立雲端策略發展部,負責擬定集團上雲策略,並於2020年正式啟動7年集團雲端轉型計畫;在多數金融機構仍停留在單點遷移或IT現代化的現下,國泰金融集團在 2025 年即完成 100 套系統上雲,更將雲端轉型階段從 Cloud Ready、Cloud Adoption 推向 Cloud First,成為數據與人工智慧應用的關鍵引擎。

國泰金控資訊長|吳建興 James Wu
圖/ 數位時代

「百套系統上雲不僅僅是數字,更是讓國泰從『 IT 進化業務』邁向『 IT 驅動成長』的關鍵轉折。」國泰金控雲端策略發展部協理顏勝豪表示,上雲帶來的效益十分顯著,包括提升資源可用性與營運敏捷度、減輕 IT 維運負擔;同時,雲端業者多具備零碳排或綠能機房機制,亦有助於企業朝向 ESG 永續營運邁進。「金融上雲不是單純的現代化基礎設施或者是升級技術,而是為了換取速度與可靠度,讓集團可以加速創新腳步、彈性調配資源,以及培育所需人才與技能,為未來做最佳準備。」
為讓集團員工、金融同業以及有志上雲的夥伴可以進一步探討雲端轉型的各種可能,國泰金控舉辦雲端轉型成果發表會,會中除有集團子公司分享最新成果,三大公有雲平台業者也從不同技術視角共同探討在合規、資安與 AI 應用的可能。

七年、三階段,國泰金融集團將雲端內化為營運流程與創新引擎

國泰金控科技長|姚旭杰 Marcus Ya
圖/ 數位時代

為什麼國泰可以領先市場完成雲端轉型、數據與 AI 賦能業務?

顏勝豪認為,雲端轉型的起點不是直接遷移系統,而是從四個面向打底:應用系統盤點評估、雲端架構設計、雲端遷移藍圖規劃,以及組織治理框架建立,而這也是 Cloud Ready 階段最重要的事情。
「不同子公司有不同商業模式與節奏,若沒有共同語言與平台底座,上雲很容易各自為政。」顏勝豪表示,為讓所有員工可以齊步前行,國泰以雲端遷移方法論 Cathay 6R(註1)作為共同語言、用平台作為共同底座,讓轉型不只是技術選擇,而是集團行動。
完成單一系統的雲端遷移後,便進入 Cloud Adoption 階段。在這個階段中,要透過大規模遷移建立更成熟的上雲標準作業流程(SOP),透過 FinOps 機制控管與優化雲端營運成本,以及透過自動化與治理模型確認多雲環境與安全與維運穩定性,目標是將雲端內化為組織日常運營的一部分,進而邁向 Cloud First 階段:在合規前提下,新專案與系統升級預設在雲端環境開發,並善用雲原生優勢加速新產品功能開發速度。
「集團雲端策略只有一個核心原則:讓雲成為 AI 時代的成長引擎,而不是單純的基礎設施。」關於國泰的未來雲端布局,顏勝豪如是總結。

國泰金控 雲端策略發展部 協理|顏勝豪 Otto Yen
圖/ 數位時代

以雲端為 AI 資源引擎、發揮數據燃料價值,實現 AI 賦能業務應用

國泰不僅在2025年完成集團百套系統上雲,也啟動數據上雲計畫並為 GenAI 奠定基礎建設。
例如國泰金控實現數據上雲,打造資料湖倉與 GAIA 生態系統架構為 AI 賦能業務做準備:成立國泰風險聯防中心(CRC)攜手集團洗防人員強化風險控管與金融犯罪因應能力;釋出國泰員工 AI 助手–Agia–Beta
版,提供差勤、福利與權益、技術支援、職務職能與集團其他資訊等五大類別管理辦法等查詢服務;此外,亦推出集團數據共享平台、集團法規知識庫、 AI 評測中心等服務,更好發揮 Cloud First 與 AI 賦能業務應用的價值。
雲端是 AI 時代的關鍵底座、數據則是 AI 的燃料。顏勝豪指出,發展AI需要龐大的 GPU 算力,若自建 GPU 機房,不僅硬體設備昂貴、折舊速度快,光是散熱系統一年就高達兩、三千萬元的成本,若採取雲端資源,可以隨啟隨用,同時,大幅降低試錯成本。「當雲端打好基礎、AI成為能力模組,銀行、人壽、產險與證券的創新不再是單點突破,而是放大集團級綜效。」

國泰以 Cloud First + AI 持續領先市場、形塑未來樣貌

「雲端可以優化算力成本,資料則決定 AI 應用上限。」顏勝豪解釋,在 AI 新世代,AI 模型定調能力「下限」,集團子公司掌握的「獨特資料」則決定應用的「上限」,考量雲端有許多好用 AI 服務,唯有資料上雲才能發揮數據價值、用 AI 賦能集團各子公司業務。
例如國泰世華銀行將採取多公有雲策略,打造雲端智慧生態圈,並以現代化雲原生技術拓展應用場景;同時,運用 AI 與資料分析優化客戶服務體驗,並藉由跨雲整合機制支援多元業務模式,以充分發揮上雲效益。至於國泰產險,不僅在兩年半內完成13套核心系統上雲、優化營運流程,如以 Serverless 架構打造百萬級效果、萬元成本的短網址系統等,讓雲端成為產險驅動長期成長的核心引擎與標準配備。

國泰人壽則是透過雲端與 AI 滿足不同客戶需求,如以 AI Search 精準呈現關鍵字搜尋結果,讓客戶可以精準且快速的查找所需資料、大幅優化官網體驗與滿意度。至於國泰證券則是於2026年初推出「庫存管家」服務,以客戶持股為核心,應用 AI 技術打造個人化推播服務,協助投資人更有效率地掌握庫存狀況,提供更即時、系統化的投資管理體驗。
總的來說,國泰金控在集團的雲端轉型不僅是技術升級,更是思維革新,從百套系統上雲進展到 Cloud First 階段,可以預期在雲地基礎下,國泰將進一步引領 AI 時代變革,持續提升營運韌性與放大創新價值。

註1:Cathay 6R 國泰設計 Cathay 6R 雲端遷移方法論,將系統遷移方式依據上雲模式、系統開發成本分為 Rehost 、Replatform、Refactor、Rewrite、Replace 和 Retain 共6種遷移架構,並能對應到 IaaS、PaaS、SaaS 三種不同上雲模式。

登入數位時代會員

開啟專屬自己的主題內容,

每日推播重點文章

閱讀會員專屬文章

請先登入數位時代會員

看更多獨享內容

請先登入數位時代會員

開啟收藏文章功能,

請先登入數位時代會員

開啟訂閱文章分類功能,

請先登入數位時代會員

我還不是會員, 註冊去!
追蹤我們
2026 大重啟
© 2026 Business Next Media Corp. All Rights Reserved. 本網站內容未經允許,不得轉載。
106 台北市大安區光復南路102號9樓