AIの出力をどう確認するか ── 数字・固有名詞・引用・日付の4箇所を先に見る
「AIに書かせたので、確認お願いします」。部下からこう言われて資料を渡された課長が、どこから見ればいいのか分からずに全文を読み直している。研修の相談で、この場面の話がよく出ます。
書く側の技能は業務で使うプロンプトの型(4要素)に書きました。この記事はその対になる、読む側の技能です。AIの出力を受け取った人が、何を、どの順番で、どこまで見るか。
正直に書くと、読む側の技能のほうを先に身につけるべきだと当社は考えています。書く側は失敗しても書き直せば済みますが、読む側の失敗は社外に出てから見つかるからです。登場する業務や文書は架空の想定例で、実際の顧客事例ではありません。
全文を読み直す確認は、3週間で消える
AIの出力を確認する、と聞いて多くの人が思い浮かべるのは、全文を最初から最後まで読む作業です。最初の何回かはそうします。ただ、これは続きません。
自分で書いた文章は、書きながら確認が済んでいます。AIの文章は一度も読んでいない状態で手元に来るので、読む負担がそのまま乗ります。1,000字の通知文を精読して、直すのが2箇所。これを毎回やると、途中から目が滑ります。滑っていることに本人は気づきません。そして「AIの出力は大丈夫だった」という経験だけが積み上がって、確認は形だけになります。
だから、確認は「全文を読むか読まないか」ではなく「どこを先に見るか」で設計します。
先に見るのは、数字・固有名詞・引用・日付
生成AIの間違いには、出やすい場所があります。文章の流れや敬語は、たいてい問題ありません。崩れるのは、文章の中に埋まっている「事実」の部分です。
| 見る場所 | よく起きる間違い | 何と突き合わせるか |
|---|---|---|
| 数字 | 合計が内訳と合わない。単位や桁が違う。率と実数の取り違え | 渡した元データ(見積書、集計表) |
| 固有名詞 | 会社名・人名・製品名の表記ゆれ。存在しない部署名。似た名前の取り違え | 名刺、契約書、組織図 |
| 引用 | 「〜によると」の出典が存在しない。法令の条番号が違う。実在する文書の内容が違う | 出典そのもの。見つからなければ削る |
| 日付 | 曜日と日付が合わない。年度の取り違え。期限が前後している | カレンダー、元の依頼文 |
4つに共通するのは、AIが「それらしく埋めてくる」場所だということです。材料に数字がなければ、それらしい数字を置く。出典を求められれば、それらしい出典を作る。文章としては自然なので、流し読みでは引っかかりません。
この順番にしている理由
順番は、間違ったときの損害が大きい順で、かつ見つけやすい順です。
数字が最初なのは、稟議書や見積に載る数字の誤りが、そのまま金額の判断を狂わせるからです。見つけるのは簡単で、文中の数字を全部丸で囲んで、元データと1つずつ突き合わせるだけです。文章を読む必要すらありません。
固有名詞が2番目なのは、相手の名前や社名の誤りが、内容の正しさに関係なく信用を落とすからです。案内文の宛先の社名が1字違う。それだけで、その文書は読まれません。
引用は3番目です。頻度は数字や固有名詞より低いのですが、出たときの厄介さが違います。「厚生労働省の資料によると」と書かれた文を読んだ人は、それ以上疑いません。存在しない出典は、ないことを証明するのに時間がかかります。出典が示された文を見たら、その資料を実際に開く。開けなければ、その一文は削る。ここだけは例外なくやります。
日付が最後なのは、機械的に確かめられるからです。曜日と日付の組み合わせは、カレンダーを見れば済みます。手間は小さいのですが、通知文の日付の誤りは全社員に届いてから見つかるので、外せません。
4つを見終わってから、文章の流れを読みます。ここまで来ると内容の骨格は確認済みなので、流れを読む負担はかなり軽くなっています。
確認に、自分で書く時間の半分以上かかるなら
確認は、やればやるほど安全になります。ただし、それは時間をかけてよいという意味ではありません。
線引きは1つで足ります。確認にかかる時間が、自分で一から書く時間の半分を超えたら、その業務にAIを使う意味を疑う。半分という数字に根拠があるわけではなく、目安として置いている値です。会社や業務によって違うので、断定はできません。
超えている場合、原因はたいてい出力側ではなく入力側にあります。材料を渡していないから、AIが埋める箇所が増える。埋める箇所が増えるから、確認する箇所が増える。数字と固有名詞は、材料として渡してあれば、出力でも間違いにくい。確認が重いなら、プロンプトの「何を材料に」を見直すほうが先です。
確認を軽くしてよい出力
すべての出力を同じ濃さで確認する必要はありません。次のような出力は、4箇所の確認を省くか、ざっと見るだけで足ります。
- 自分しか読まないメモや、思考の整理のための箇条書き
- 分類の案や見出しの候補など、どうせ人が並べ直すもの
- 言い換えの候補を10個出させて、そこから1つ選ぶような使い方
- 社内の下書きで、次の工程で別の人が全部書き直すことが決まっているもの
共通しているのは、その出力が「そのまま誰かに届く」ことがない点です。届かないなら、間違いは次の工程で自然に落ちます。
逆に、社外に出る文書、金額が載る文書、人の名前が載る文書は、どれだけ短くても4箇所を見ます。3行のメールでも、宛名と日付は確かめます。地味ですが、効きます。
部下が持ってきたAI文書を、上司はどう見るか
冒頭の課長の話に戻ります。部下がAIで作った文書を持ってきたとき、上司が全文を読み直すのは、二重に無駄です。部下の確認が信用されていないことになり、上司の時間も消えます。
かといって「AIで作ったの?」と聞くのも、あまり良い質問ではありません。使ったかどうかは、文書の正しさと関係がないからです。それに、この質問を繰り返すと、部下はAIを使ったことを言わなくなります。隠れて使われるのが、いちばん困ります。
聞くのは、次の3つで足ります。
- 「材料は何を渡した?」── 元データがあれば、数字と固有名詞はそこと突き合わせてある可能性が高い
- 「数字の元はどれ?」── 出典の有無をこの一言で確かめられる
- 「4箇所は見た?」── 数字・固有名詞・引用・日付を見たかどうか。見ていなければ、見てから持ってくるように返す
3つ目が成り立つには、部署の中で「4箇所」が共通語になっている必要があります。当社の研修で部署単位を勧めている理由の1つは、ここにあります。上司と部下が同じ確認の言葉を持っていないと、確認が個人任せになります。
差し戻すときは、箇所を指定します。「なんか違う」ではなく「2ページ目の合計が内訳と合っていない」。AIが書いた文書は本人が書いたわけではないので、漠然とした差し戻しだと、どこを直せばいいか本人にも分かりません。
誰が確認したかを、文書に残すか
社外に出る文書については、確認した人の名前を残す運用を当社は勧めています。文書の末尾に書く必要はなく、送信前のチェック欄でも、ファイル名の末尾でも構いません。
これは監視のためではありません。何かあったときに「誰も見ていなかった」と分かるのがいちばん困るからです。議事録について確定の責任者を決める話は、議事録に生成AIを使うときの社内ルールに書きました。考え方は同じです。
入力してよい情報の線引きは別の話で、社内ルールは第3条と第8条だけ先に決めるで扱っています。出力の確認と入力の線引きは、混ぜずに別々のルールにしておくほうが、後で直しやすいと考えています。
これは研修でなくても身につく
正直に書くと、4箇所の確認そのものは、研修を受けなくても身につきます。この記事の表を印刷して、部署の書式に「数字・固有名詞・引用・日付」のチェック欄を4つ付ければ、たいていの会社で回ります。当社に頼む必要はありません。
研修で扱う価値があるのは、確認の技能そのものではなく、確認が重くなる原因を入力側に戻す練習のほうです。自社の業務を1つ選び、匿名のサンプル文書で材料の渡し方を変えて、確認の量が減るかを見る。この往復を演習にしています。書く側と読む側を分けて教えると、この往復が起きません。
よくある質問
AIの出力を毎回全部確認する時間がありません。
全文を読む必要はありません。数字・固有名詞・引用・日付の4箇所を探して、元データと突き合わせるところから始めてください。文中の数字を丸で囲んで1つずつ照合する作業は、1,000字の文書なら数分で終わります。それでも重いなら、渡している材料が足りず、AIが埋めている箇所が多い可能性があります。材料を足すほうが、確認を増やすより先です。
出典が書かれていれば信用してよいですか?
いいえ。出典が書かれている文こそ、実際にその資料を開いて確かめてください。生成AIは、それらしい資料名や条番号を作ることがあります。資料が見つからない、または書かれている内容と違う場合は、その一文を削ります。出典つきの文は、読んだ人が疑わなくなるぶん、誤りが残ったときの影響が大きい箇所です。法令の条番号も同じ扱いです。
上司が部下のAI文書を確認するとき、何を聞けばよいですか?
「AIで作ったか」ではなく、「材料は何を渡したか」「数字の元はどれか」「4箇所は見たか」の3つをおすすめしています。使ったかどうかは文書の正しさと関係がなく、聞き続けると部下がAIの利用を隠すようになります。差し戻すときは「どこが」を指定してください。3つが通じるには、部署の中で「4箇所」が共通語になっている必要があります。
読む側の型も、4つで足りる
書く側の型が4要素なら、読む側の型も4箇所です。数字、固有名詞、引用、日付。この順に探して、元データと突き合わせる。自分しか読まない出力は軽く、社外に出る出力は短くても4箇所。確認が重いなら、出力ではなく入力を疑う。上司は「AIで作ったか」を聞かず、「材料は何か」を聞く。
自社のどの文書から確認の型を決めるか迷っている段階でも、お気軽にご相談ください。