AIエージェントのKPIを考えるとき、まず件数や削減工数だけを置きたくなります。ただ、それだけでは、例外対応の増加や承認逸脱のような副作用を見落としやすくなります。
AIエージェントのKPIは、成果・プロセス・安全性・利用定着の4層に分け、各指標に「計算式」「分母」「数字を取る場所」を決めて初めてテンプレートとして使えます。実行件数は成果ではありません。処理件数が増えても、人の手直しや差し戻しが増えていれば改善とは言えないため、成果の指標と安全性の指標を同じ表に並べて毎月見ます。
要点
- AIエージェントのKPIは成果・プロセス・安全性・利用定着の4層に分け、各指標に計算式・分母・数字を取る場所を決めて使います。
- 実行件数は成果ではないため、成果は「人の手直しなしで完了した件数÷渡した業務の件数」のように分母を業務件数にして測ります。
- 指標ごとに見直しの目安と見直す先（評価項目、Runbook、監査ログ）を決めておくと、KPIの変化が改善の行動につながります。
4層のKPIテンプレート（計算式・分母・計測元）
次の表をそのまま表計算に写し、「自社の値」と「見直しの目安」の列を足して使います。分母を決めずに率だけを並べると、月ごとに意味が変わってしまうため、分母の欄は必ず埋めます。
| 層 | 指標 | 計算式 | 分母に入れるもの | 数字を取る場所 |
|---|---|---|---|---|
| 成果 | 完了率 | 人の手直しなしで完了した件数 ÷ 対象件数 | エージェントに渡した業務の件数（途中で止まった件数も含む） | 実行ログと業務システムの完了記録 |
| 処理時間の短縮 | 導入前の平均処理時間 − 導入後の平均処理時間 | 同じ種類の業務の件数 | 業務システムの受付時刻と完了時刻 | |
| プロセス | 初回成功率 | 再実行なしで成功した件数 ÷ 実行件数 | エージェントが実行した件数 | 実行ログ |
| 人の手直し率 | 人が出力を修正した件数 ÷ 出力件数 | エージェントが出した出力の件数 | 承認・レビューの記録 | |
| 安全性 | 承認逸脱件数 | 承認が必要なのに承認前に実行された件数 | （件数で見る） | 監査ログと承認記録の突き合わせ |
| 停止・差し戻し率 | 停止または差し戻しになった件数 ÷ 実行件数 | エージェントが実行した件数 | 運用ログ、Runbookの対応記録 | |
| 利用定着 | 利用者率 | 月に1回以上使った人数 ÷ 対象者数 | 使える権限を持つ人数 | 利用ログ |
| 手動に戻した率 | エージェントを使わず手作業で処理した件数 ÷ 対象業務の件数 | エージェントで処理できる業務の件数 | 業務システムの処理者記録 |
実行件数と成果を区別する
「エージェントが何件動いたか」は、どれだけ使われたかを示すだけで、業務が良くなったかは示しません。同じ業務を3回やり直せば実行件数は3件になります。成果の指標は、分母を「エージェントに渡した業務の件数」にして、人の手直しなしで終わった割合で見ます。
| 実行件数として数えるもの | 成果として数えるもの |
|---|---|
| エージェントの起動回数、ツールの呼び出し回数 | 人の手直しなしで完了した業務の件数 |
| 再実行・やり直しを含む処理回数 | 業務1件あたりの処理時間の短縮 |
| 出力した文書や下書きの数 | そのまま使われた出力の数（修正後に使われたものは別に数える） |
処理件数が伸びても、承認待ちが増えたり、やり直しが多かったりすると、実際の生産性は上がっていないことがあります。成果の指標だけでなく、途中の失敗率や安全性の指標を同じ表に並べる方が判断を誤りにくくなります。
見直しの目安を先に決める
テンプレートには「この値を超えたら見直す」という目安の列を設けます。目安の値は業務の重さで変わるため、運用を始めてからの実績を見て決めます。例えば、人の手直し率が上がり続けたら評価セットを見直す、承認逸脱が出たら対象業務を縮める、というように、指標ごとに「誰が・何をするか」まで書きます。
KPIの変化を改善につなげる先は、指標ごとに決まっています。失敗のパターンが偏るなら評価項目（Agent Evals）を、停止や例外が増えたら運用Runbookを、承認逸脱を追えないなら監査ログを見直します。
KPI会議では、運用責任者、業務責任者、承認責任者が同じ数字を見る状態を作ることが重要です。同じ指標でも、誰がどの目安で止めるのかが決まっていないと改善行動に変わりません。どこまでをエージェントに任せ、どこで人が止めるかという境界の決め方はAIエージェントのガバナンス設計で、申請件数や承認率などAI利用の申請・承認側の指標はAIガバナンス運用レポートの作り方で整理しています。
よくある質問
AIエージェントのKPIは何を見ればいいですか？
成果、プロセス、安全性、利用定着の4層で見るとバランスを取りやすくなります。
件数以外に見るべき指標は何ですか？
初回成功率、人の手直し率、承認逸脱件数、手動に戻した率です。件数が増えていても、これらが悪化していれば実際の生産性は上がっていない可能性があります。
AIエージェントのKPIの計算式と分母はどう決めますか？
計算式は「数えたい件数 ÷ 分母」の形にそろえ、分母を先に決めます。成果の指標は「エージェントに渡した業務の件数」、プロセスと安全性の指標は「エージェントが実行した件数」、利用定着は「使える権限を持つ人数」を分母にします。途中で止まった件数を分母から外すと、率が実態より良く見えます。
実行件数と成果はどう区別しますか？
起動回数、ツールの呼び出し回数、やり直しを含む処理回数は実行件数として数え、使われた量を示す指標として扱います。成果は、人の手直しなしで完了した業務の件数や、業務1件あたりの処理時間の短縮で数えます。
安全性のKPIはどう置けばよいですか？
停止件数、例外率、承認未実施の発生率など、事故の芽を早めに拾える指標を置くと運用しやすくなります。
KPIが悪化したら何を見直しますか？
KPIの変化に応じて、評価セット、Runbook、監査ログを更新する運用サイクルを作ると改善しやすくなります。失敗のパターンが偏るなら評価項目を、停止や例外が増えたらRunbookを、承認逸脱を追えないなら監査ログを見直します。
営業向けのAIエージェントでも同じテンプレートでよいですか？
4層の枠組みは同じですが、成果の指標に商談化率などの営業指標が加わります。営業特化の指標は営業AIエージェントのKPIで整理しています。
