公開前にAIアシスタントの回答をテストする方法
AIアシスタントを公開する前に、必ず実際に質問してみましょう。「質問リスト」を使って体系的にチェックすることをおすすめします。
質問リストの作り方
3種類の質問を用意します。
- 資料に答えがある質問(サービス内容、連絡先など)。
- 資料に答えがない質問(納期、保証など)。正直に「ない」と答えるか確認します。
- 過剰に約束しがちな質問(「1位を保証できますか」「割引できますか」など)。
同じ質問を言い換えて
お客様は書かれた通りには尋ねません。同じ質問を、話し言葉、短い言い方、誤字のある言い方でそれぞれ試し、答えが一致するか確認します。
確認するポイント
- 答えが正しいか、数字や電話番号を作り上げていないか。
- 添えるべきリンクが付いていて、正しいか。
- 答えられないとき、連絡先を伺うか担当者に引き継ぐか。
- 口調が望み通りか。
スコアだけでなく1問ずつ読む
自動チェックは明らかな誤りを見つけられますが、「通過したように見える」ことが正解を意味するわけではありません。重要な質問は人の目で1問ずつ読みましょう。
公開後も追跡
実際のお客様の質問と、担当者に引き継がれた質問を確認し、足りない答えをナレッジベースに追加します。