AI導入の効果測定では、利用者数や削減時間に加えて、空いた時間を使ってどの業務を改善したかまで確認します。作業時間が減っても、提案の件数や対応の品質が変わらなければ、事業への効果を説明しにくいためです。
代表の木村喜生はnoteで、削減した時間を充てる業務を「インパクト業務」と呼び、既存の活動を増やす方法と、手が回っていなかった活動に着手する方法を整理しました。この記事では、その考え方をもとに、企業がAI導入のKPIと検証計画を決める手順を解説します。
AI導入で測る指標
導入の進み具合と、業務への効果は分けて記録します。たとえば研修の受講者数やAIの利用回数は、利用状況を知るための指標です。それだけでは、仕事が速くなったか、確認の負担が増えていないかまでは判断できません。
| 評価する内容 | 指標の例 | 確認する点 |
|---|---|---|
| 利用状況 | 対象者のうち実際に使った人数、対象業務での利用件数 | 使うべき業務で使われているか |
| 作業の効率 | 1件あたりの作業時間、月間の処理件数 | 同じ作業量・難易度で比較できるか |
| 品質と負担 | 修正率、確認時間、差し戻し、担当者への引き継ぎ件数 | 時間短縮と引き換えに負担や誤りが増えていないか |
| 業務成果 | 期限内の提案件数、滞留案件数、対応漏れの件数 | 改善したい業務の状態に変化があったか |
指標を選ぶときは、分母も決めます。修正が必要だった件数だけを数えると、処理量が増えたときに品質が下がったように見える場合があります。対象件数と修正件数を一緒に記録し、どの種類の修正が増えたかを調べます。
削減時間の使い道と業務成果
AIで減らす作業を選ぶ段階で、空いた時間の使い道も決めます。業務を担当する人と管理者が合意しておけば、導入後に改善したい活動が増えたかを確認できます。新しい業務へ充てる場合は、必要な権限や他部署の協力も先に確認します。
既存の活動を増やす場合
既存の活動を増やす場合は、作業を妨げている工程を特定します。提案資料の作成に時間がかかり、顧客への提案が遅れているなら、資料の下書きや集計を支援する方法が候補になります。ただし、最終確認をする担当者がすでに手いっぱいなら、下書きを増やしても提出件数は増えません。確認する工程の処理量も調べます。
この場合の評価には、AIが作った下書きの本数よりも、確認を終えて期限内に提出できた提案の件数が合います。受注への効果を調べる場合は、顧客層や案件の条件も記録し、提案件数の増加だけを理由に受注が増えたと断定しないようにします。
後回しになっていた活動に着手する場合
新しい活動に着手する場合は、成果を確認するまでに時間がかかることがあります。たとえば問い合わせの分類や記録を自動化し、空いた時間で手順書を直す場合です。作成した手順書の数だけで評価せず、同じ問い合わせの再発や差し戻しが減ったかを後から確認します。
依頼件数を自分で増やせない部門では、処理件数の増加を目標にすると業務に合わないことがあります。受付から完了までの日数、滞留の件数、期限超過の割合など、その担当者が改善に関与できる指標を選びます。
効果を計算する例
次は、同じ内容・件数の月次業務を比べるための仮定の計算例です。Autoagentの顧客実績や、導入後の成果を約束する数値ではありません。
| 項目 | 時間・費用 |
|---|---|
| 導入前の作業時間 | 月20時間 |
| 導入後の作業・確認・修正時間 | 月8時間 |
| 追加で必要な保守・設定調整 | 月2時間 |
| 差し引きの削減時間 | 20 − 8 − 2 = 月10時間 |
この10時間を1時間あたり3,000円と仮定して換算すると、月30,000円です。ただし、これは空いた稼働時間の換算値です。給与の支払額がそのまま30,000円減ることを意味しません。残業や外注費が減った場合の支出削減と、別の活動に時間を使える効果は分けて説明します。
費用対効果を比較するときは、ここからツール利用料、AIの利用料、基盤の費用、追加の外部保守費などを確認します。すでに作業時間に含めた社内保守の2時間を、同じ時間単価で費用にも重ねて差し引かないようにします。初期の開発・研修費用は、毎月の費用と分けて記録します。
ROIを金額で計算するなら、一定期間について「効果の金額から費用を引いた額 ÷ 費用」を使えます。効果に何を含めたかを明記し、実際の支出削減だけで計算した値と、稼働余力の換算値も含めた値を区別します。売上増加を扱う場合は、売上と利益を混同せず、外部要因も含めて検討します。
比較条件と検証の進め方
導入前後の比較では、作業件数、案件の難易度、担当者、繁忙期かどうかを記録します。簡単な案件だけをAIに処理させ、導入前の全案件と比較すると、効果を大きく見積もる可能性があります。可能な範囲で、同じ種類の案件を比べます。
- 対象を決める:誰のどの作業を改善するか、対象外の作業は何かを決める。
- 導入前を記録する:処理件数、作業時間、修正や差し戻しを、通常の業務が分かる期間で測る。
- 合格条件を決める:許容できる修正率、守る期限、人が確認する範囲を決める。
- 限定して試す:対象者や案件を絞り、確認・修正・保守も含めた時間を記録する。
- 次の活動を確認する:空いた時間で、事前に合意した活動を実施できたかを調べる。
評価する周期は、対象業務の発生周期に合わせます。毎日の問い合わせと月末だけの集計では、同じ検証日数で十分な件数を集められるとは限りません。学習直後の操作時間も記録し、慣れた後の状態と分けて評価します。
継続・改善を決める基準
導入後は、利用が少ない理由と、使っても効果が出ない理由を分けて調べます。使い方が分からないなら研修や手順の改善が候補です。出力の確認に時間がかかるなら、入力情報、出力形式、任せる範囲を見直します。接続先への転記が残っているなら、連携の開発を検討できます。
試行を広げる前に、品質の条件を満たしたか、保守を含めても時間を減らせたか、その時間を必要な活動へ充てられたかを確認します。品質や情報管理の条件を満たせない工程は、人が担当するか、対象範囲を縮めて再検証します。
AI導入の業務整理・研修・開発の相談
Autoagentでは、対象業務と人が確認する工程を整理したうえで、AIエージェント開発・業務自動化を支援しています。担当者が業務でAIを使う方法を学ぶ場合は、法人AI研修をご覧ください。n8nで処理をつなぐ場合の確認事項は、n8nの企業導入と運用の確認ポイントにまとめています。
元になった考察
この記事は、木村喜生のnote記事AIで成果が変わらない本当の原因と「インパクト業務」はなにかをもとに、企業で評価を進めるための指標、計算例、検証手順を加えて構成しています。導入効果の数値や業務例は説明用であり、個別企業での成果は対象業務と運用条件に応じて検証する必要があります。