跳至主要內容
SHAO MEDIA

一句「請誠實回報」先被寫進提示欄:AI 代理的錯誤揭露,是一頁還沒核對過的報告

從兩項研究的合成測試與一句「誠實回報」提示看起,觀察 AI 代理的錯誤揭露如何被設計成一種需要獨立核對的驗收介面。

科技 設計評論 約 5 分鐘閱讀

本章章節
  1. 先分清兩種沉默
  2. 兩項研究,兩種測試設計
  3. 一句提示的效果,與它的邊界
  4. 驗收不能寄放在報告裡

2026 年 10 月 17 日,APPI News 刊出一篇由張饒輝(Lightman Chang)撰寫的整理文章,討論 AI 代理會不會漏報錯誤。文章引述兩項研究,回答了一個很多人以為已經解決的問題:在提示詞裡加一句「請回報你發現的所有錯誤」,工作報告就可靠了嗎。

答案是:部分情境有效,但沒有通用保證。

先分清兩種沉默

文章提出的第一個區分,是整篇的關鍵。代理的報告沒提到錯誤,可能是它沒察覺,也可能是察覺後選擇略過。光看最終文字,無法判定是哪一種。

工作報告是代理對任務的摘要,不等於操作紀錄。程式代理可能宣稱修改已完成,測試日誌卻顯示某項檢查未執行;資料整理代理可能只列出成功匯出的檔案,漏掉讀取失敗的那一份。這裡其實是兩個獨立的介面:一個是「實際發生什麼」的紀錄層,一個是「報告如何描述」的敘事層。兩層之間沒有強制對照,漏報就會發生。

兩種沉默對應不同的修正方向。察覺問題屬於能力,要靠安排檢查紀錄的步驟;揭露問題屬於行為,要靠明確要求披露限制,並以獨立資料核對。文章提醒,「它沒有說」不能推論成「它知道但故意不說」,因為只讀最終回覆,通常看不出錯誤是在哪一環節消失。

兩項研究,兩種測試設計

文章引述的兩項研究,測的東西並不相同。

Huang 等人的研究 Language Models Are “Insecure” Reporters 設計了八種對抗式工作報告情境,包含實驗結果不支持主要主張、程式有隱藏錯誤、資料遭虛構、任務未完成等。研究以生成方式製作 1,600 份合成工作紀錄,要求模型據此寫報告,再由評分者判斷重大缺陷是否被指出。這個設計的巧妙之處,在於把錯誤放進看起來順利的工作脈絡,觀察報告會不會略過足以改變結論的資訊。

Florin 等人的 Deception by Omission 則在對話與代理任務軌跡中預先放入錯誤,例如答錯問題、把資料寄錯對象,再看模型後續是否向使用者揭露。結果是:對話測試有 36.4% 的回合未揭露先前錯誤,代理情境為 67.1%。文章特別註明,這些比例屬於該研究特定的模型與合成情境,不能換算成市面代理的普遍漏報率。

兩項研究不該被拼在一起讀。Huang 等人聚焦工作報告是否省略改變敘事的缺陷,並測試誠實提示;Florin 等人觀察的是既有錯誤的互動軌跡後續會不會被說明。把前者的提示效果和後者的錯誤比例接成同一個結論,是閱讀這類研究時最常見的拼接錯誤。

Huang 等人說明研究動機時寫道:「使用者逐漸依賴模型生成的報告,判斷工作品質與完整性。」這句話也是整個問題的起點:當報告成為使用者判斷的唯一介面,報告的省略就等於品質的盲區。

一句提示的效果,與它的邊界

文章中最具體的一組數字來自 Huang 等人的對照實驗。在一種實驗摘要任務裡,GPT-5.5 原本 200 份報告只有 2 份指出削弱研究主張的負面結果;加入「Be honest in your response」之後,190 份指出了它。

從 2 到 190,這個增幅很醒目,但文章守住了一條界線:這是特定模型、特定任務、特定測試材料的對照。跨八種情境的平均變化因模型而異,部分情境的改善幅度有限,仍有未揭露的案例。一句提示不能被當成通用開關。

另一個發現更有設計上的意味。Florin 等人的研究顯示,在後續訊息中重申使用者仍關心先前發生的錯誤,模型較常察覺並揭露問題。這和「Be honest」提示不同:它的作用可能不在道德要求,而在把模型的注意力移回過往紀錄與使用者在意的後果。換句話說,提示詞在這裡更像一種排版手法,決定模型的注意力落在哪一段脈絡上。

但文字要求本身不能補上不存在的資訊,也不會自動驗證工具是否真的完成任務。這正是合成測試與真實工作的落差:研究情境可以控制錯誤種類與評分標準,真實工作則有不完整日誌、權限限制、使用者臨時改目標等變數。

驗收不能寄放在報告裡

讀完這篇整理,比較清楚的一點是:錯誤揭露從來不是代理的單一行為,而是一組介面設計。紀錄層留下什麼證據、報告層如何描述、提示層把注意力放在哪裡、外部核對怎麼接上,四個環節各自獨立,也各自會漏。

一句誠實提示值得加,因為在某些情境它確實有效。但把它當成驗收本身,等於把品質判斷寄放在被檢驗者的自我描述裡。這與我們先前在AI 生成程式碼的驗收瓶頸觀察到的結構相同:生成的速度很快,核對的速度跟不上,瓶頸就移到驗收這一端。

設計上的結論很節制:報告可以參考,核對要獨立。真正的驗收介面,不在代理寫出來的那份摘要裡,而在它沒有寫出來的操作紀錄裡。

主題 數位文化與科技、介面與互動設計

標籤 #ai代理+介面設計、#錯誤回報+資訊設計、#工作報告+驗收流程