ほとんどのチャットボットが失敗する理由
ほとんどのチャットボットは、あらゆる人にすべてを提供しようとするため、ユーザーを苛立たせます。修正は技術ではなくデザインから始まります。
デザイン原則
- 狭い範囲: 1つのことをうまくやります。
- 優雅なフォールバック: 助けられない時は人間に転送します。
- 期待値設定: ボットができること・できないことを事前に伝えます。
- 進捗の表示: 複数ステップのタスクでは、いまどこにいるかを示します。
会話デザイン
- 挨拶: 明確に、短く、期待値を設定してください。
- エラーハンドリング: 「わかりません」は絶対言いません。
- 確認: 重要な操作は常に実行前に確認してください。
- 記憶: 会話内の文脈を覚えておき、前のメッセージを参照してください。
技術的ベストプラクティス
- レイテンシ: 2秒以内に応答してください。
- RAG: 知識ベースに基づいた回答です。
- ガードレール: ボットが話題から外れたり約束をしたりしないようにします。
- 分析: 解決率、エスカレーション率、ユーザー満足度を追跡してください。
避けるべきアンチパターン
- 人間のふりをしないでください。
- 理解できない時の無限ループです。
- ユーザーがすでに伝えた情報をもう一度尋ねること。
- 構造化された応答ではなく長い壁のような文章。
- 人間エージェントへの明確な経路がありません。
重要指標
- 解決率: 60–80%を目標にしてください。
- 平均処理時間: 人間のみの場合から40–60%削減です。
- CSAT: 5点中4.0+を目標にしてください。
- エスカレーション率: 30%以下が良好です。
- フォールバック率: 10%以下です。
会話フロー設計
トップ20の問い合わせをマッピングし、それぞれにフローを構築してください。決定木の考え方を使います:
1. 意図検出: ユーザーが何を求めているかを分類します(LLMまたはキーワードマッチング)。
2. スロットフィル: 必要な情報を段階的に集めます。
3. アクション実行: APIを呼ぶかデータベースに問い合わせます。
4. 確認: 実行前に操作内容を復唱します。
5. フォローアップ: ほかに必要なことがないか尋ねます。
高度なテクニック
- 感情検出: 不満そうなユーザーには即エスカレートしてください。
- プロアクティブメッセージ: ページコンテキストに基づき挨拶します。
- 多言語サポート: 最初のメッセージから言語を検出します。
ボットの仕事はまず振り分け、それから回答
顧客向けチャットボットの多くは、すべてに答えようとして失敗します。分からないと確実に認識し、会話のきれいな要約とともに人間へ渡すボットは、8割を解決して残り2割を苛立たせて離脱させるボットより価値があります。まず引き継ぎを設計します。何が引き起こすか、人間は何を受け取るか、顧客は次に何が起きるかどう告げられるか。
検索品質が天井を決める
サポートボットはチャット界面を持つ検索システムです。答えがナレッジベースになければ、どんなプロンプトも直しません。最も価値ある作業は、ボットが失敗した質問を監査し、そもそも答えが原資料に存在したかを確認することです。存在したなら問題はチャンク分割か検索、存在しないなら問題はコンテンツで、モデルを変えても無駄です。
アカウント状態を推測しない
特定の顧客、注文、請求書、残高に関する具体情報は、モデルの会話記憶ではなくツール呼び出しから来なければなりません。推測された状態を自信を持って復唱することが最も被害の大きい失敗で、権威に見えて間違っています。ツールが失敗したら、穴を埋めるのではなく失敗と言ってください。
解決率と満足度を別々に測る
高い解決率で低い満足度は、本来引き継ぐべきときに引き継がないことを意味します。高い満足度で低い解決率は、すべてをエスカレーションしていてボットが何も足していないことを意味します。どちらの失敗かを知るには両方の数字が必要です。