AIの効果の測り方：時間・費用・品質の指標

効果の測り方を決めておくと、続ける・広げる・見直すの判断がしやすくなります。この記事では、指標の選び方と、測る手順を順に説明します。

なぜ効果を測る必要があるのですか？

AIの導入では、利用料や設定、社員の教育などに費用がかかります。効果を測っておくと、次のような場面で役に立ちます。

• 続けるかどうかの判断：費用に見合う効果が出ているかを確かめられます。
• 広げる順番の判断：効果の大きい業務や部署から優先して広げられます。
• 社内への説明：経営層や現場に、取り組みの成果を具体的に伝えられます。
• 改善のきっかけ：効果が出ていない業務を見つけ、使い方を見直せます。

効果を測らずに導入を続けると、「なんとなく便利」という評価にとどまり、予算の判断や全社への展開が進みにくくなります。

導入前の基準値はどう取ればよいですか？

効果は「前と比べてどう変わったか」で表します。そのため、導入する前の状態（基準値）を記録しておくことが出発点になります。

① 対象の業務を決める

「議事録の作成」「問い合わせへの一次回答」「提案書の下書き」のように、測る業務を具体的に決めます。社内のすべての業務を一度に測ろうとせず、代表的な業務を数個に絞ります。

② 業務の単位をそろえる

「1件あたり」「1日あたり」「1か月あたり」など、比べる単位を決めます。議事録なら「会議1時間あたりの作成時間」、問い合わせなら「1件あたりの回答時間」のようにします。

③ 一定の期間、記録する

2〜4週間程度、いまのやり方で作業した時間や件数を記録します。忙しい時期と落ち着いた時期で差が出る業務は、その点もメモしておきます。

④ 記録の方法を簡単にする

記録が負担になると続きません。業務システムの記録（処理件数、完了までの日数など）を使える場合はそれを活用し、手で記録する場合は、表に「開始・終了の時刻」と「件数」を書く程度にとどめます。

基準値を取り忘れた場合は、AIを使わない日やグループを一部に設けて比べる、過去の記録から推定する、といった方法があります。推定の場合は、前提を書き残しておきます。

どんな指標を選べばよいですか？

指標は、大きく5つの種類に分けられます。業務の目的に合わせて、2〜4個を組み合わせるのが目安です。

時間

• 1件あたりの作業時間
• 依頼から完了までの日数（待ち時間を含む）
• 月あたりに減った作業時間の合計

時間は、もっとも測りやすい指標です。生成AIの効果を最初に測る場合は、時間から始めると取り組みやすくなります。

費用

• 外部への委託費（翻訳、文字起こしなど）の変化
• 残業時間の変化
• AIの利用料・設定費・教育費を含めた費用の合計

費用を見るときは、AIにかかる費用も同じ表に並べることが大切です。減った費用と増えた費用の差で考えます。

品質

• 誤りの件数や、手直しにかかった時間
• 上司や顧客からの差し戻しの回数
• 社内の基準（表現のルール、確認項目）を満たした割合

AIの出力には誤りが含まれることがあるため、品質の指標は時間の指標とセットで見ます。時間が減っても、手直しが増えていれば効果は小さくなります。

売上

• 提案や見積もりの件数、返答までの速さ
• 問い合わせから商談につながった割合
• 新しい商品やサービスの準備にかかった期間

売上はAI以外の要因の影響を大きく受けるため、AIの効果だけを取り出すのは難しい指標です。参考の指標として、ほかの指標と組み合わせて使います。

社員の負担

• 「作業が楽になった」「本来の業務に時間を使えた」と答えた人の割合
• 繰り返し作業や、気の重い作業に使う時間の変化
• 新しく入った人が業務を覚えるまでの期間

社員の負担は数字にしにくいものの、AIの定着に深く関わります。簡単なアンケートで、定期的に確かめます。

測る手順はどうなりますか？

① 目的と指標を決める

「この業務でAIを使う目的は何か」を一文で書き、それに合う指標を選びます。目的が「回答を早くする」なら時間、「誤りを減らす」なら品質を中心にします。

② 基準値を記録する

前の章のとおり、導入前の状態を記録します。

③ 導入後に同じ方法で測る

導入の直後は、使い方に慣れるまで時間がかかるため、効果が小さく出ることがあります。慣れる期間を見込んだうえで、基準値と同じ単位・同じ方法で測ります。

④ 結果を表にまとめる

業務ごとに「基準値・導入後・差・コメント」を並べます。コメントには、効果が出た理由や出なかった理由、現場の声を書きます。

⑤ 判断と改善につなげる

結果をもとに、続ける・広げる・使い方を見直す・止める、のいずれかを決めます。PoCの段階で成功と撤退の条件を決めている場合は、その条件と照らし合わせます（「PoCの進め方」参照）。

具体例：議事録の作成で測る場合

ある会社が、社内会議の議事録づくりに生成AIを使う場面を例に、指標の組み合わせ方を示します（数字は説明のための例です）。

• 目的：議事録の作成にかかる時間を減らし、会議の翌日までに共有できるようにする
• 単位：会議1時間あたり
• 基準値：3週間の記録で、作成に平均60分、共有までに平均2日
• 指標：作成時間（時間）、共有までの日数（時間）、参加者からの修正依頼の件数（品質）、担当者のアンケート（社員の負担）
• 導入後：慣れる期間の2週間を除いて3週間測ったところ、作成は平均25分、共有は翌日、修正依頼は導入前とほぼ同じ
• 読み方：時間は大きく減り、品質は保たれていると判断できます。一方で、固有名詞の誤りが目立つというコメントがあったため、用語の一覧をAIに渡す工夫を加えることにしました。

このように、時間の指標だけでなく品質と現場の声を並べると、「続ける」と「どこを直すか」を同時に決められます。

振り返りはどのくらいの頻度で行えばよいですか？

頻度の目安は、次のとおりです。

• 導入から3か月程度：月に1回。使い方や設定の見直しが多い時期のため、こまめに確かめます。
• 使い方が落ち着いた後：四半期に1回。予算や計画の見直しの時期と合わせると、判断に使いやすくなります。
• 大きな変化があったとき：対象業務の追加、製品の大きな更新、利用者の大幅な増加などがあれば、頻度にかかわらず測り直します。

振り返りの場には、現場の利用者と、予算を決められる立場の人の両方が参加すると、改善と判断が同時に進みます。

数字だけで判断しないためには？

効果の数字は大切な材料ですが、それだけで判断すると見落としが生まれることがあります。次の点もあわせて確かめます。

• 生まれた時間の使い道：作業時間が減っても、その時間がどう使われたかで、会社にとっての価値は変わります。
• 品質とリスク：誤りや情報の扱いの問題が起きていないか。総務省・経済産業省の「AI事業者ガイドライン」も、AIを使う事業者がリスクに目を配ることを求めています。
• 現場の受け止め方：数字がよくても、使う人が負担に感じていれば定着しにくくなります。
• 測れない効果：知識の共有が進んだ、新しい人が育ちやすくなった、といった効果は、コメントとして記録に残します。
• 一時的な変化：導入直後の数字は、慣れや物珍しさで上下しがちです。複数回の結果で傾向を見ます。

チェックリスト

• 測る業務を代表的な数個に絞っている
• 比べる単位（1件あたり・1か月あたりなど）を決めている
• 導入前の基準値を2〜4週間程度記録している
• 時間・費用・品質・売上・社員の負担から2〜4個の指標を選んでいる
• AIの利用料・設定費・教育費も費用に含めている
• 品質の指標を時間の指標とセットで見ている
• 導入後も基準値と同じ方法で測っている
• 振り返りの頻度と参加者を決めている
• 生まれた時間の使い道や現場の声も記録している