由客戶需求開始

固定選單可處理可預測的分類問題;文件助理可協助回答措辭不同的問題。若系統需要更改訂單或準備流程操作,就要額外權限及控制。應先訂明任務,稱為「代理」並不能證明其可靠能力。

同一退款要求,三種系統界線

客戶要求取消課堂及退回額度。產品名稱不能解釋風險,關鍵在於系統能改哪些紀錄,以及是否須由人批准。

同一退款要求,三種系統界線
能力行為及控制示例
資訊聊天機械人按已批准資料解釋取消政策;涉及帳戶的決策交人處理
唯讀助理核實身分後讀取預約狀態,但不能取消
可執行操作的代理提出取消操作;受限制工具核實擁有權、政策及重複要求

把回答與操作分開

閱讀政策與發出退款的後果不同。訂明系統可存取的來源、可用操作及何時需人員批准,為每項連接使用有限權限,並保留足夠紀錄以了解操作為何被嘗試或拒絕。

測試能力界線

測試真實需求、資料不足及未經授權的操作要求。評估系統能否適時追問、引用正確資料,或在無法繼續時交由員工接手。量度完整任務質素及營運成本,而非只看一次流暢的回答。

進行前先確認

  • 選擇能完成任務的最小能力範圍。
  • 訂明允許來源、操作及人員接手安排。
  • 同時測試失敗、不確定及成功回答。

付諸實行

相關指南