AIの要約・引用を原文に当てる｜言い回しが強くなるずれの見つけ方

1．引用を探し、前後を読み、意味の強さを比べます

個人情報保護委員会の注意喚起には、生成AIの応答に不正確な内容が含まれることがあると記されています。

引用と要約は分けて扱いましょう。引用としてかぎ括弧で示す部分は、原文の文字列と比べます。要約は言葉を変えても、対象や条件、確かさの程度を残します。「意味が近い」という判断だけで、書き換えた文を原文どおりの引用として扱わないようにします。

2．出典のリンクから、確認表を埋めるまで

確認する文と資料を対にします

報告に使う文を取り出し、対応する資料の題名とURLを横に置きます。文の中に別々の説明があれば分けます。たとえば「利用でき、対象も拡大する」という文なら、利用条件と拡大の予定をそれぞれ確認します。

まずURLを人が開き、題名や発行元を見ます。AIが示したページ番号や見出しも確認対象に含めます。位置の指定だけを信用して、確認済みにしないでください。

引用の特徴的な言葉を原文で検索します

引用文の一部を、ブラウザーやPDFの検索欄に入れます。長い文で見つからなければ、固有名詞や特徴的な短い語句で探します。同じ表現が複数あれば、見出しと対象を比べます。

PDFは、閲覧画面のページ順と紙面に印刷されたページ番号を分けて記録しましょう。検索できない資料は、該当しそうなページを目で確認します。読めない段階では「原文にない」と決めず、保留にします。

前後の条件と、数字の単位を読みます

該当文だけでなく、前の段落、後の段落、表の見出しや注記まで読みます。「ただし」「対象外」「試行中」といった語を確認表に残しましょう。

数字は値だけを見ず、単位、期間、上限か目安かも比べます。日付は開始日なのか、更新日なのかを確認します。固有名詞は正式な表記と対応先を見ます。ここでは計算の正しさではなく、原文の記載が報告文へ正しく移っているかを確かめます。

最後に、誰が何をする文なのかを読み直します。申請者と受付担当を入れ替えると、同じ言葉が並んでいても別の指示になります。

3．「一部」「予定」を落とした短い例を比べます

以下は照合の練習用に作った架空の短文です。実在の制度や製品、会社の運用を示すものではありません。

見つけたら、「予定」「一部」などを原文に合わせて戻します。文の末尾だけでなく、冒頭の対象や条件も直しましょう。引用として使うなら、原文を写し直して照合します。要約として直した文は、引用と区別して残します。

4．○・△・×と保留を使い分けます

確認表は、担当者の印象ではなく、原文と比べた結果を残すために使います。次の印は本記事の運用案です。

×は「世の中にその事実がない」という判定ではありません。今回の資料で裏付けられないという記録です。○も、その資料との一致を示す印として使います。資料自体の内容が現在も正しいかを保証する印にはしません。

確認表の列は、次の形から始められます。

5．AIには「要約の前に根拠」を求めます

Anthropicは、長い文書を扱う作業で、先に原文どおりの引用を抜き出させる方法を示しています。

同じ資料では、説明ごとに引用と出典を付け、根拠となる引用が見つからなければ、その説明を取り下げさせる方法も示しています。

次は、この考え方を原文照合用に組み立てた指示文の作例です。

渡した資料だけを使って、社内報告に使う要約案を作ってください。
先に、要約の根拠になる原文を短く、そのまま抜き出してください。
説明ごとに、次の項目を対応させてください。
・資料名と、渡したURLまたはファイル名
・見出し、ページ番号とその数え方
・原文の短い抜粋
・要約案
・原文にある主語、対象、条件、可能性や予定を示す語
原文を見つけられない説明は採用せず、「未確認」としてください。
読めない資料や分からない位置を推測で補わないでください。
引用文と、言い換えた要約を区別してください。

この指示で得た抜粋や位置も、人が原文を開いて確かめます。Anthropicのヘルプは、もっともらしくても事実に基づかない引用をClaudeが示すことがあると説明しています。

また、元サイトには要約で省かれた文脈や詳細があるとして、引用された出典を確認するよう案内しています。

まず、報告に使う文を確認表へ移してみましょう。原文の場所、前後の条件、修正後の文面を残し、人が照合を終えたところに印を付けます。

6．AIの引用を原文に当てるときの確認表

公開・共有の前に、この表で確かめます。

7．自社の事務の手順まで形にしたいとき

ここまでの確認を、自社の事務の手順書や、AIの結果を確かめる検査まで形にしたい場合は、当社のように、手順と検査の設計まで行う相談先が選択肢になります。オンラインは全国から対応しています。

自社の事務のどこから確認を入れるかを相談したい場合は、30分の無料相談をご利用ください。法律・税務・労務の判断や、効果の約束は行いません。