AIチャットが正しく回答しやすいコールセンターナレッジの書き方

将来このサイトへAIチャットを追加する場合、投稿の量だけでなく、情報の分かりやすさが回答品質に影響します。長い議論の中に結論が埋もれていたり、古い規約と新しい規約が同じように残っていたりすると、AIはどちらを使うべきか判断しにくくなります。

AIが参照しやすい投稿の形

1. 1つの投稿では1つの問い合わせを扱う
2. 冒頭に短い結論を書く
3. 対象者、適用日、例外条件を明記する
4. 根拠となる規約や資料の更新日を書く
5. 古い回答は削除または無効であることを示す

例えば「解約できます」だけでは不十分です。「契約者本人からの申し出で、本人確認が完了し、未払いがない場合は当日付で受付できます」のように、判断条件を一緒に記載します。AIが出すのは最終判断ではなく回答候補なので、オペレーターが確認すべき項目も残してください。

お客様の個人情報、応対録音の書き起こし、社外秘情報をそのまま投稿しないでください。事例は内容を一般化し、架空の氏名や番号も不要です。

運用上の提案

管理者が確認した投稿には更新日と監修部門を追記し、判断が未確定の投稿はAIの根拠にしない運用が必要です。高評価だけで正しさを決めず、正式ルールとの一致を確認してください。参照対象を解決済み投稿だけに限定できるかは機能設定の確認が必要です。現場で想定するAIへの質問例があればコメントへお願いします。

試験用データで分かったこと

過去の解決済み投稿を使って30問の質問を作り、AIが示した回答候補を専門担当者が確認しました。結論だけが短く書かれた投稿では、AIが対象外の契約にも同じ回答を広げる傾向がありました。一方、対象者、適用日、例外、参照資料がそろった投稿は、回答の根拠を示しやすくなりました。

評価した4項目

1. 質問の意図に合う結論か
2. 対象外の条件を見落としていないか
3. 参照した投稿と規約を示せるか
4. 人へ確認すべき場面で断定を避けられるか

正答率だけで評価すると、危険な断定を見逃します。そこで、答えられない質問を正しく保留できたかも点数に入れました。本人確認が必要な手続き、補償の可否、個別審査などは、一般的な説明までに止めて有人対応へつなぎます。

投稿を更新した後は、古い回答が検索結果に残っていないか再試験します。今後は、実際の問い合わせを個人情報が残らない形へ加工し、業界別に評価問題を増やしたいと考えています。皆さんからも、AIに任せてよい質問と人が判断すべき質問の境界について意見をお願いします。

※この投稿はデモンストレーション用のサンプルです。