重點摘要
建立包含標準答案、引用與正確處理方式的驗收題庫。先確認檢索有找對文件,再判斷回答是否完整、可追溯並在必要時轉人工。
把真實情境寫成驗收案例
挑選常見問法、例外條件和需要交接的情境,再去除個人資料。每題記錄適用版本、關鍵回答要素和可接受的引用來源。
區分搜尋與回答出錯的位置
先檢查正確文件是否出現在檢索結果。若已找到正確片段,再檢查模型是否忠實轉述期限、金額和例外條件。這個順序能幫助團隊判斷要改索引、內容還是回答指示。
在內容更新後重跑同一批問題
更換模型、調整切分或更新知識庫後,使用相同題庫比對結果。記下新增的錯誤案例,以及應重新檢查的來源版本,讓後續更新可以做同樣的驗收。
參考資料OpenAI 技術文件