BLOG by effect.moe
ブログ一覧へ戻る

PDFのプロンプトインジェクション|資料と指示を分ける

受け取ったPDFをAIで要約したい。そんな時は、文書を読ませることと、文書内の指示に従わせることを分けて考えます。PDFの中に「別の資料を送れ」と書かれていても、資料の著者がこちらの仕事を指示できるわけではありません。

カガミが図と確認カードを使い、PDFのプロンプトインジェクション|資料と指示を分けるの要点を説明するヘッダー

受け取ったPDFをAIで要約したい。そんな時は、文書を読ませることと、文書内の指示に従わせることを分けて考えます。PDFの中に「別の資料を送れ」と書かれていても、資料の著者がこちらの仕事を指示できるわけではありません。AIに送信やファイル操作の権限も与えていると、指示の混入が情報の持ち出しや意図しない操作につながるおそれがあります。

要点

  • PDFの文章は、依頼者からの操作命令とは区別します。
  • 要約に不要な送信・検索・ファイル操作の道具を外します。
  • 出力だけでなく、何にアクセスできたかも確認します。

漫画でざっくり読む

PDFの本文と操作の許可を分ける4コマ漫画

1. 資料を経由して操作を誘導される

プロンプトインジェクションは、AIへの入力に紛れた文章が、本来の依頼と違う動きを誘う問題です。外から取得した資料に含まれる場合は、間接的な攻撃として扱われます。PDFも、文章の取り込み先になり得ます。同じ入力に含まれた資料と操作指示をAIが取り違える場合があるため、文章の注意書きだけでなく、実行する道具の側でも操作の範囲を絞ります。

OWASPのプロンプトインジェクションの説明は、外部ファイルなどを経由する入力を扱っています。特定の拡張子が安全かどうかだけでなく、その内容をどう扱い、どの道具につなぐかが重要です。

ここで説明するのはAIへの指示の混入です。PDF閲覧ソフト自体の脆弱性や、添付ファイルのマルウェア対策とは別の問題で、別途対策が必要です。

2. 「要約して」に必要な範囲へ絞る

たとえば公開された製品説明のPDFを要約するなら、そのPDFと、要約を書き出す場所があれば足りることがあります。メール送信や社内フォルダ全体へのアクセスまで必要とは限りません。これは説明用の仮想例です。

やりたいこと最初に検討する範囲原則として切り離す操作
公開PDFを要約指定PDFの読み取り社内情報の検索と送信
表を抜き出す指定ページの読み取り任意のプログラム実行
内容を照合許可済みの比較資料未指定の資料取得
自社の株式会社EFFECTでは、外部資料の本文を操作の承認として扱いません。資料から見つけたURLや宛先も、そのまま送信先へ採用せず、依頼者が指定した範囲と照合します。

3. 怪しい文を見つけるだけに頼らない

「以前の指示を無視して」といった文を探す検査は手掛かりになります。ただし言い方は変えられるため、特定の言葉がないことを安全の証明にはできません。画像や読み取り結果も資料として扱い、そこから道具を動かす時は、依頼者が許可した操作かを確認します。

PDFのプロンプトインジェクションの確認手順

外部の文章と依頼者の指示を入力上で区別することも対策の一部です。しかし、それだけで攻撃を完全に防げるとは限りません。道具を使う前の認可、つまりその操作を許すかの判定も組み合わせます。

4. 検査には秘密を含まない資料を使う

最初から顧客資料や本番の鍵を使って試す必要はありません。実在しない連絡先や架空の文章を使い、依頼外の送信・読み取りが拒否されるか確認します。実際の攻撃文を第三者のサービスに送って試すことは避け、許可された環境に限定します。

確認したいのは要約の文章だけではありません。外部へ通信したか、許可していない場所を読んだか、記録に何が残ったかを確かめます。アクセス記録が取得できない環境では、その部分は未確認と区別してください。

5. 警告が出なかった時こそ、境界を見る

人が読むと自然な資料でも、AIにとっては指示のように解釈される場合があります。PDFの見た目や作成者の名前だけで、接続した道具の権限を広げないことが大切です。

AIエージェントの権限を分ける記事では、読む段階と送る段階を分ける整理を説明しています。資料を読む仕事では、まず「その作業に送信まで必要か」を問い直せます。

資料の内容を操作の許可と取り違えず、要約に不要な権限を外し、通信やアクセスの実際の結果を確かめます。ただし、この記事の対策は完全防御の保証ではありません。取り込む仕組み、利用するAI、接続する道具に応じた検証と見直しを続けてください。

執筆:シュ コウメイ

関連リンク

用語の補足・よくある質問

記事に出てきた専門用語を、かんたんに補足します。

この対策だけで効果を保証できますか?+
保証できません。設定・表示・実際の動作を分けて確認し、環境に応じた検証が必要です。
最初にどこを確認しますか?+
記事に示した対象と権限、または画面と記述の対応を、実物で照合してください。
総合FAQをもっと見る
構造化ペディア DFB構造化メソッド大全の4コマ漫画カバー STRUCTUREPEDIA 構造化ペディア

AI時代に書き換わった「考える」を、DFBメソッドとして体系化した読み物です。

MAIL MAGAZINE 構造化とAI実装のメルマガ

新着記事、実装メモ、構造化の考え方をメールで受け取れます。

AIセントラル 社内情報を、AIが参照できる記憶基盤へ。