跳到主要內容
Cypher's Practical Coding
正在準備工作環境...

實踐篇:AI 說做完了,先別相信

AI 說做完了,先別相信

學完這堂課,你能為工作任務製作一張驗收卡,判斷 AI 的產出能不能真的交出去。

為什麼要學這個?

你請 AI 整理一份月度成效報告。幾分鐘後,它回覆:「報告已完成。」版面整齊、分析也很有自信,你掃了一眼就寄給主管。 主管很快回來問:「這裡的總轉換數為什麼和各渠道加總不同?成長率是跟上個月比,還是跟去年同期比?資料來源在哪裡?」 你重新檢查才發現,表格中的數字加起來是 1,248,摘要卻寫成 1,428;其中一段提到「主要成長來自會員活動」,但報告裡沒有任何資料支持這個判斷。 這就像新人寫完報告後說「好了」,不代表你會讓他直接寄給客戶。你會檢查收件人、數字、附件、敏感資訊和結論是否有依據。AI也需要同樣的驗收程序。 「已產出」只代表畫面上出現了一份內容;「已完成」代表這份內容符合用途、通過檢查,而且能安全交給下一個人。兩者中間,差了一張驗收卡。

核心概念

流暢的文字不等於正確的內容

AI很擅長把句子寫得完整、有條理。這項能力也容易造成錯覺:內容讀起來順,就像是真的。 問題是,語氣有自信與資料是否正確,是兩件不同的事。AI可能引用不存在的調查、把兩個不同期間的數字放在一起比較,或根據有限資訊補出一個合理故事。 解法是把「看起來不錯」拆成可核對的項目:

  • 數字是否與原始資料一致?
  • 加總、比例與期間是否正確?
  • 每個重要事實是否有來源?
  • 結論是否能從資料推得出來?
  • 不確定的地方是否清楚標示? 例如,報告寫「活動帶動整體業績成長 20%」,你要分別確認活動期間、比較基準、原始數字與計算結果。不能因為句子完整,就把四個問題當成已經回答。 對外影響越大的內容,越不能只靠閱讀感覺判斷。價格、日期、合約條件、客戶名稱、成效數字,都應回到原始資料核對。

驗收標準要在交辦時就說

很多人收到產出後才開始想:「我到底要檢查什麼?」這時很容易依照當下印象挑錯,也可能漏掉真正重要的項目。 解法是在交辦任務時,就先定義什麼叫完成。 例如,你請AI整理會議紀錄,可以預先說明:

  • 必須列出決議、負責人與期限。
  • 沒有明確負責人的事項要標示待確認。
  • 不得把討論中的提案寫成已決議。
  • 客戶名稱與金額必須與原始紀錄一致。
  • 摘要控制在五點內。 這些要求就是驗收標準。AI知道交付方向,你也知道收到內容後該檢查什麼。 驗收標準不需要寫成一大篇規章。對多數日常任務而言,五到八項就夠用。優先挑出「漏掉就不能交」或「出錯會造成麻煩」的項目。

驗收要分成內容、格式與風險

只檢查錯字,可能漏掉錯誤結論;只檢查數字,可能忘記產出根本不是主管要的格式。 你可以把驗收分成三個角度。 內容驗收確認事情是否正確:

  • 關鍵資訊有沒有遺漏?
  • 數字、日期、名稱是否正確?
  • 結論是否有資料支持?
  • 來源是否能找到? 格式驗收確認內容是否能被使用:
  • 有沒有依照指定順序?
  • 篇幅是否符合需求?
  • 表格、標題與條列是否清楚?
  • 使用的語言和語氣是否合適? 風險驗收確認內容是否能安全交付:
  • 是否包含不該出現的個人資料?
  • 是否做出未經授權的承諾?
  • 是否把推測寫成事實?
  • 是否需要主管或相關人員確認? 例如,一封客戶回覆即使沒有錯字,若自行承諾退款日期,仍然不能交付。風險驗收就是用來攔住這種「寫得很好,但不能寄」的內容。

不同任務需要不同驗收卡

一張萬用清單看似方便,實際上常常只剩「確認內容正確」「確認格式完整」這類空泛句子。 會議紀錄最怕把討論寫成決議;數據報告最怕數字錯誤與比較基準不明;客戶回覆最怕做出未授權承諾。三種任務的風險不同,驗收項目也應不同。 解法是保留一個共用骨架,再依任務補上專屬項目。 共用項目可以是語言、格式、事實來源與敏感資訊。專屬項目則直接對準工作中最常出錯的地方。 設計驗收卡時,回想過去三次退件原因。主管曾經問過什麼?客戶曾對哪句話產生誤會?哪一種錯誤最花時間補救?這些真實問題比想像中的完美標準更有用。

驗收不是叫 AI 再讀一次

如果你只說「請檢查有沒有問題」,AI很可能重新讀過內容,然後回覆「已確認無誤」。這和請新人自己看一眼沒有太大差別。 解法是要求它依照驗收卡逐項提出證據。 例如,不要只問「數字正確嗎」,而是要求列出摘要中的總數、各項數字加總,以及兩者是否一致。不要只問「有附來源嗎」,而是要求指出每個關鍵結論對應哪一個來源。 AI可以協助做第一輪驗收,但不能取代你對高風險項目的確認。涉及對外發送、價格、合約、個人資料或重要決策時,仍要由有權限的人核准。 最實用的分工是:讓AI照卡片找缺漏,讓人確認事實與權限。AI負責減少粗心,人負責承擔判斷。

動手做

這次練習分成兩部分:製作一張驗收卡,再用它審查一份故意有缺陷的 AI 產出。 挑一個你常做的任務,例如月報、會議紀錄、活動文案或客戶回覆。填寫下面的驗收卡,每個項目都要能回答「符合」或「不符合」,不要使用「內容夠好」「感覺專業」這類無法確認的描述。

驗收卡模板

任務名稱:____
使用對象:____
交付目的:____
內容驗收
□ 必要資訊包含:____
□ 數字、日期與名稱已和____核對
□ 每個重要結論都有____支持
□ 無法確認的資訊已標示____
□ 沒有把推測寫成確定事實
格式驗收
□ 產出使用____格式
□ 篇幅限制為____
□ 語言與語氣符合____
□ 讀者能在____內找到結論
風險驗收
□ 未包含不應公開的____
□ 未自行承諾____
□ 涉及____時,已標示需要誰確認
驗收結果
□ 可交付
□ 修改後再驗收
□ 缺少原始資料,暫停交付

待審查的 AI 產出

以下是一份故意放入問題的月度活動摘要:

六月會員活動成效非常成功,證明折扣策略受到市場高度認可。
本月活動成果:
- 官網訪客:12,000 人
- 商品頁瀏覽:8,500 人
- 加入購物車:2,300 人
- 完成訂單:1,280 人
- 新會員訂單:730 人
- 舊會員訂單:620 人
整體訂單較上月成長 35%,主要原因是新會員對限時優惠反應熱烈。建議七月直接把折扣提高到八折,預估可以再增加 25% 業績。
資料來源:公司內部資料。

請用驗收卡找出至少六個問題。你可以從這些方向檢查:

  • 新會員與舊會員訂單加總,是否等於完成訂單?
  • 「較上月成長 35%」有沒有提供上月數字?
  • 「主要原因」是否有足夠資料支持?
  • 「市場高度認可」能不能從現有資料得出?
  • 「提高到八折」是否可能有語意問題?
  • 「增加 25% 業績」的預估依據在哪裡?
  • 「公司內部資料」是否足以讓讀者回查?
  • AI 是否有權直接決定折扣?

審查結果範例

驗收結論:不可交付,需補資料並修改。
發現的問題:
1. 新會員訂單 730 加上舊會員訂單 620,共 1,350 筆,與完成訂單 1,280 筆不一致。
2. 沒有提供上月訂單數,無法確認成長 35%。
3. 缺少各流量來源或會員行為資料,不能判定成長主要來自新會員。
4. 「市場高度認可」是推測,現有數字只能說明活動期間的行為。
5. 「折扣提高到八折」語意不清,可能被理解成折扣變多或價格變高。
6. 增加 25% 業績沒有計算方式或依據。
7. 資料來源只寫公司內部資料,無法回查報表名稱與日期。
8. 折扣幅度涉及價格策略,需要主管確認,AI不能直接決定。
需要補充:
- 上月訂單數
- 原始報表名稱與資料期間
- 新舊會員訂單分類方式
- 折扣與業績變化的歷史資料
- 價格策略的核准人

完成後,把驗收卡留在你平常使用 AI 的地方。下次交辦同類任務時,直接把卡片和需求一起提供;收到產出後,再依同一張卡逐項核對。 你帶走的成品不是一份只能用一次的答案,而是一張可以反覆使用、持續修正的驗收卡。

這堂課的收穫

  • 能分辨「AI 已產出」和「工作已完成」,不再把流暢文字直接當成可交付成果。
  • 能從內容、格式與風險三個角度,設計可逐項確認的驗收標準。
  • 能使用驗收卡找出數字矛盾、缺少來源、無依據推測與越權承諾。

小抄

交付 AI 產出前,問完這十題:

  • □ 必要內容都有嗎?
  • □ 人名、公司名、日期與金額正確嗎?
  • □ 數字能和原始資料對上嗎?
  • □ 加總、比例與比較期間一致嗎?
  • □ 每個重要事實都找得到來源嗎?
  • □ 結論真的能從資料推出來嗎?
  • □ 推測和事實有清楚分開嗎?
  • □ 格式、篇幅與語氣符合使用情境嗎?
  • □ 有沒有個人資料、未授權承諾或敏感內容?
  • □ 需要主管或相關人員確認的地方,已經確認了嗎? 只有全部通過,才叫完成。