自己解決率の計算式と測り方:AIの自動集計が実態より高く出る4つの理由

自己解決率の計算式と測り方:AIの自動集計が実態より高く出る4つの理由

AIチャットボットの自己解決率は、「AIだけで解決した会話数 ÷ AIが対応した会話数」で求めますが、ツールの自動集計のままでは実態より高く出がちです。

有人に切り替わらずに終わった会話を、お客様があきらめて閉じたものまで「解決」と数えるためです。

毎週30〜50件(目安)の会話を人が読んで判定し、その割合を自動集計に掛けて「実質的な自己解決率」を推計しましょう。

この記事の
3つのポイント

  • 計算式は分母の取り方で3通りあり、自社の式を1つに固定します。
  • 判定の4区分を先に文章にし、最初は2人で判定します。
  • 月次報告では、自動集計と実質の値を定義とともに並べます。

自己解決率とは:AIチャットボットで測るときの定義

自己解決率とは、お客様が有人対応を使わずに解決できた問い合わせの割合です。この記事では、AIチャットボットだけで解決した割合として測ります。

前提は、登録した資料を検索して回答を作る生成AI(RAG)型のチャットボットです。選択肢をたどるシナリオ型やFAQ型と違い、自由な文章で答えます。そのため的外れな回答でも会話が自然に終わり、「解決」に数えられやすくなります。

自己解決率が上がるほど、お客様は待たずに済み、有人の負荷が下がります。

ツールが自動で出す数字を「自動集計の解決率」、人の判定で補正した値を「実質的な自己解決率」と呼び分けます。

自己解決率の計算式は、分母の取り方で3通りに分かれる

自己解決率の式は、分母に何を置くかで3通りに分かれます。検索上位の解説記事(2026年10月時点)は1つの式か、確立した定義はないとして代わりの指標を示すだけなので、並べて比べます。

式の型計算式弱いところ
FAQの閲覧数を基にする式(FAQの閲覧数 − 問い合わせ数)÷ FAQの閲覧数読んで諦めた人も「解決」に入る
全チャネルの問い合わせの量を基にする式自己解決できた数 ÷ 電話・メール・チャット・SNSを含むサポートの需要全体自己解決できた数の数え方が決まっていない
この記事の式(AIチャットボット)AIだけで解決した会話数 ÷ AIが対応した会話数自動集計のままだと高く出る(次の章)
代わりの指標(利用者数の比)ヘルプセンターの利用者数 ÷ 問い合わせをした利用者数自己解決率そのものではなく、「4対1」のような比で割合と比べにくい

例:あいさつなどを除いてAIが対応した会話が1,000件、AIだけで終わったのが800件なら、自動集計の解決率は80%です。

式が違えば数字も変わるので、他社の値や一般的な目安とは比べられません。自社の式と、除く会話(あいさつだけ・社内テストなどを分子と分母の両方から)を決めて固定し、前月と比べます。

自動集計のチャットボット解決率が実態より高く出る4つの理由

自動集計では、有人に切り替わらずに終わった会話を機械的に「解決」と数えることがよくあります。すると、次の4つの会話も解決に入ります。

理由1:途中で終わった会話も「解決」に数えられる

回答に納得せず画面を閉じても、切り替えがなければ解決です。実際は電話をかけているかもしれません。

理由2:「解決しなかった」と押す人は一部だけ

評価ボタンを押す人は一部なので、押されない会話を解決とみなすと不満が数字に出ません。

理由3:的外れな回答でも会話は閉じる

返品できない商品を「返品できます」と案内しても、お客様が信じて閉じれば集計上は解決です。

理由4:別の窓口への案内で会話が終わる

「フォームからご連絡ください」で終わった会話は、有人の仕事がフォームに移っただけです。

会話の終わり方自動集計人が読んだ判定
正しい手順を案内し、お客様が「できました」と返した解決解決
回答のあと、お客様が無言で離脱した解決回答次第(判定が必要)
2つの質問のうち1つにしか答えていない解決部分解決
誤った内容を案内して会話が終わった解決未解決
フォームや電話の窓口を案内して終わった解決未解決(有人へ移っただけ)

私たち(株式会社miibo)も、自社のサポート用AIを miibo for カスタマーサポートで運用し、未解決の会話を毎週読んでいます。人が判定した実質的な自己解決率のほうが、自動集計の解決率より低く出ることがあります。

まず、ツールの「解決」の数え方をヘルプで確かめましょう。

実質的な自己解決率は、毎週のサンプリングで推計する

実質的な自己解決率とは、人が会話を読んで「本当に片づいたか」を判定した結果で補正した自己解決率です。自動集計で「解決」とされた会話から毎週一定数を抜き出して判定し、次の式で推計します。

実質的な自己解決率 = 自動集計の解決率 × サンプルで「解決」と判定された割合

自動集計の解決率は、判定対象外(あいさつやテスト)を分子と分母の両方から除いて出します。分母だけから除くと高く出ます。ツールで除けないときは、サンプルの判定対象外の割合から件数を見積もり、両方から差し引きます。

サンプリングで実質的な自己解決率を推計する
  1. 抜き出し 50件自動集計で「解決」とされた会話から抜き出す
  2. 判定対象 45件ツールで除き切れなかった対象外5件を除く
  3. 「解決」 30件(約67%)自動集計80% × 約67% = 実質的な自己解決率 約53%

例の件数。帯の長さは件数に比例していません

判定基準を先に決めておく

判定する人で結果が変わらないよう、基準を文章にしておきます。たとえば次の4区分です。

判定基準例
解決質問に正しく答え、お客様が次の行動に移れる状態で終わったパスワード再設定の手順を案内し、お客様が「できました」と返した
部分解決一部には正しく答えたが、残りの質問や確認が残った送料には答えたが、同時に聞かれた配送日には答えていない
未解決答えていない、誤っている、または別の窓口に回しただけ「担当窓口へお問い合わせください」で終わった
判定対象外問い合わせとして成り立っていないあいさつだけ、テスト送信、意味のない文字列

迷いやすい無言の離脱は、「回答が正しく、手順として完結していれば解決」のようにルールを1つ決めます。会員IDなどで突き合わせられるなら、「解決」の会話のあと数日以内の電話やメールも確かめます。突き合わせない値は、まだ高めに出うる上限として扱います。

毎週の判定手順

  1. 対象を抜き出す。先週の自動集計で「解決」とされた会話から、30〜50件をランダムに選びます。低評価だけを選ぶと低く出すぎます。
  2. シートに並べる。列は「会話ID・日付・質問の要約・判定・理由・原因の型・対応」です。
  3. 基準に沿って読む。最初の数週間は2人で判定し、割れたものを話し合って基準を直します。
  4. 未解決の理由を書く。「ナレッジがない」「ナレッジが古い・矛盾」「文脈の取り違え」「AIに任せない範囲で、正しく人や窓口へ案内した(直さない)」など、短く残します。
  5. 自動集計と比べる。1週分の割合は偶然でも十数ポイント動くので、差は4週分を合わせて見ます。差が広がったら、新しい種類の問い合わせが増えていないか確かめます。

週50件なら、判定に数時間かかります。

自己解決率と一緒に見るカスタマーサポートKPI

自己解決率だけでは、お客様の満足や有人の負荷は分かりません。次の5つを並べ、CSATと平均解決時間は「AIのみ」と「有人介在」に分けて見ます。

指標計算式注意
有人への移行率有人に切り替わった会話数 ÷ AIが対応した会話数低いほど良いとは限らない。相談ボタンを隠せば下がるが、電話に流れるだけ
有人の待ち時間切り替えから担当者が付くまでの時間の合計 ÷ 有人に切り替わった会話数難しい問い合わせが残るので、件数が減っても延びることがある。受付時間の内と外で分ける
CSAT(顧客満足度)満足と答えた数(5段階の4と5)÷ アンケートの回答数回答率を並べ、回答が少ない月は参考値にする
平均解決時間解決までの時間の合計 ÷ 解決した会話数AIのみと有人介在で大きく違うので分け、中央値も見る
問い合わせ率有人で受けた件数 ÷ 事業の規模(注文1,000件あたりなど)件数は会員数・注文数・季節で動くので、率で前年同月と比べる

応答率や一次解決率など従来の指標も、AIと有人に分けて読みます。有人に切り替える基準はチャットボットの有人切り替え基準で解説しています。

毎月の振り返りでは、自動集計と実質の値を並べて報告する

月次報告は1枚にまとめます。決裁者が知りたいのは「投資に見合っているか」と「何を判断すればいいか」です。

項目書くこと
1. サマリー今月の結論を3行で。良かった点、課題、判断してほしいこと
2. 自己解決率自動集計と実質的な自己解決率(4週分の判定から)を並べ、差が動いた理由を書く
3. 未解決の上位テーマ判定で未解決になったテーマと理由
4. 来月の打ち手先月直したことの効果と、来月やること

指標の定義は毎回末尾に書き、分母や判定基準を変えた月は新旧を併記します。分母と判定基準は、最初の報告の前に決裁者と合意しておきます。

設置場所や導線の見直し、答えられない質問の洗い出しなど、自己解決率を上げる施策はチャットボットが使われない原因は4段階で数えるにまとめています。

よくある質問

自己解決率の目安は何%ですか?

決まった目安はなく、自社の式で決めた目標や前月と比べます。式が違えば数字も変わるためです(計算式は3通り)。

チャットボットの解決率は、実質的な自己解決率よりどれくらい高く出ますか?

決まった差はなく、ツールの「解決」の数え方と問い合わせの種類で変わります。自社の差は、毎週の判定で自動集計と並べて確かめます(サンプリングで推計する)。

判定する会話は、毎週何件あれば足りますか?

週30〜50件が目安で、続けられる件数から始めて構いません。件数を減らしても、ランダムに抜き出します。週ごとの値は振れが大きいので、4週分を合わせて見ます。

miibo for カスタマーサポートで効果測定をAIに任せる

毎週の判定と毎月のレポートを手作業で続けると、忙しい週に判定が抜け、報告が自動集計の数字だけになりがちです。miibo for カスタマーサポートでは、解決の判定から報告の材料づくりまでをAIに任せられます。

作業手作業の場合miibo for カスタマーサポートの場合
実際に解決したかを判定する毎週数十件の会話を人が読み、4区分で判定する課題解決分析が、解決/部分解決/未解決を理由と改善提案つきで判定
未解決の傾向をつかむ判定理由をシート上で分類し、数えるタグ別分析と回答フィードバックの集計で、どのテーマで解決できていないかを確認
月次レポートを作る数字を転記し、お客様の声を読んでまとめるCSレポートとVoC分析を毎週・毎月の定期生成で作成
毎週の振り返りを続ける担当者が時間を見つけて作業するAIアシスタントのルーティンで「毎週の未解決傾向のまとめ」のような指示をスケジュール実行

アナリティクスの「AI解決率」は有人に切り替わらずに終わった会話の割合(自動集計)です。実際に解決したかは課題解決分析の判定で確かめ、導入直後は人のサンプリング判定とも見比べておくと、決裁者に根拠を聞かれたときの裏付けになります。

まとめ

自己解決率の式は分母の取り方で3通りあるので、自社の式を決めて固定します。AIの自動集計は、あきらめて閉じた会話や誤回答まで「解決」に数え、実態より高く出がちです。

毎週30〜50件(目安)を判定して実質的な自己解決率を推計し、月次報告では自動集計と並べましょう。

「解決率の数字と現場の実感が合わない」という方は、下のボタンからご相談いただけます。

この記事は、株式会社miiboのmiibo for カスタマーサポート コラム編集部が書いています(このコラムについて)。

コラム一覧へ戻る

構築も運用も精度向上も分析も
すべてAIに任せられる
AIカスタマーサポート