業務のAI化 / 実践ガイド
生成AIの社内検証は、何を比べればよいか
AIを仕事で試した結果を比べるには、完成物と確認条件をそろえます。下書きが出るまでの時間だけでなく、人が確認し、直して使える状態にするまでの記録を残す方法です。
この記事では、一つの業務を小さく試すための記録項目を紹介します。ここで示す表は記入方法の例で、Tactiaや実在企業の測定結果ではありません。
一つの業務と、確認できる出力を選ぶ
「部署の仕事にAIを使う」では、試す範囲が広すぎます。最初は「会議メモから、決定事項と未決定事項の表を作る」のように、入力と出力が分かる仕事へ絞ります。
素材、完成形、確認者を先に決めてください。完成形には「元メモにない担当・期限を追加しない」「未決定を明示する」など、合否を確かめられる条件を入れます。文章が自然という感想だけでは、仕事として使えるかを判断できません。
実際の業務資料を使う前には、社内で認められた利用範囲と入力条件を確認します。試行のために新しいツールへ資料を移す場合も、業務のルールに沿った判断が必要です。
作成・確認・修正を別々に記録する
作成は、入力を整えて下書きを作る工程です。確認は、原資料と完成条件を照合する工程。修正は、見つかった誤りや不足を直す工程です。
素材の準備が増える場合は準備時間も別に残します。確認中に修正した場合でも、区切れる範囲で記録し、区切れないときは「確認・修正を合算」と書いてください。見かけ上の精密さより、何を測ったかが分かることを優先します。
記録の単位もそろえます。1件当たりの時間なのか、複数件の合計なのかを混ぜないでください。待ち時間や連絡時間を含めるなら、その条件も通常の方法とAIを使う方法の両方へ記します。
同じ種類の仕事で比べる
同じ素材を使う比較は条件をそろえやすい一方、後から行う方法では、先に素材を読んだ経験が影響します。そのため、順番と回数も残し、一度の比較を普段の業務全体の効果として扱わないことが必要です。
別の素材を使う場合は、長さ、情報の不足、確認項目の数など、難しさに関係する条件を記します。確認者や完成条件を途中で変えた場合は、その変更を記録し、同じ条件の結果とは分けて読んでください。
| 記録する項目 | 一行の記入例 |
|---|---|
| 対象と素材 | 会議メモの分類/架空メモA |
| 完成条件 | 決定・未決定を分け、原文の根拠を付ける |
| 条件 | 同じ素材を使用/通常の方法を先に実施 |
| 時間 | 準備・作成・確認・修正を、それぞれ実測して記入 |
| 誤り | 公開日を原文にない日付で補った |
| 修正と残件 | 日付を未定へ修正/確認先は別途記入 |
この例には時間の測定値を入れていません。読者が自分の環境で記入する欄です。誤りの例も、記録方法を示すために作っています。
誤りと追加確認を残す
誤りは「どの情報が、元資料とどう違ったか」を書きます。「精度が低い」だけでは、指示、素材、確認項目のどこを変えるべきか分かりません。
不足は、AIの出力だけでなく、元資料の不足である場合もあります。元メモに期限がないことと、ある期限を誤って変えたことは分けて記録してください。追加確認の相手が必要なら、確認先と質問を残します。
誤りを直すために指示や確認方法を変えた場合は、次の試行を別の版として記録します。最初の結果と改善後の結果を混ぜず、どの変更の後にどうなったかを追える状態にしてください。
次の判断に使う材料をそろえる
続けるかは、時間の合計、完成条件への適合、残る確認、運用の負担から判断します。速くても重要な情報の誤りが残るなら、そのまま業務へ広げない選択が必要です。
条件を変えて再度試すなら、何を変えるかを一つずつ決めます。素材の不足が原因なら入力、分類の誤りなら指示、見落としなら確認項目を見直す、といった整理です。効果が確認できない場合や、入力条件が合わない場合には、試行を止める判断も残します。
最初に作るのは、対象業務・完成条件・測定項目を記した一行です。記入済みの計画書、練習素材、測定表、計算と判定の例まで使いたい方は、生成AIの社内検証を、感想で終わらせないの無料部分で対象と収録物を確認できます。
通常手順・AI下書き・範囲を変えた試行を区別する
比較対象は、普段の方法とAIを使う方法です。AIで対象を狭めたり、確認を減らしたりした場合は、同じ完成条件を満たすかを見直してください。
| 方法 | 比較する前にそろえる条件 |
|---|---|
| 通常の手順 | 素材、完成物、確認者、計測の開始と終了 |
| AIで下書き | 同じ完成条件、人の確認と修正を含む範囲 |
| 指示を変更して再試行 | 変更した版、理由、追加の確認項目 |
短い試行で分かるのは、記録した条件での結果です。件数が増えたときの例外や、別の担当者が使う場合の負担は、次の検証対象へ分けます。
よくある確認:何件試せば決められる?
すべての仕事に共通する件数を本稿では設定していません。通常、情報不足、矛盾といった異なる条件を選び、完成条件と重要な誤りを確認できる範囲を決める方法です。確認できていない条件を残した上で、次に試す範囲を判断します。