ガイド
AIレディネス:AIがドキュメントを正しく読んでいるか確認する方法
AIがドキュメントを正しく読んでいるか確認するには、いくつかのアシスタントに重要な数値、期間、条件を尋ね、すべての回答を原本と1行ずつ比較してください。数字が補足条件を伴ったテキストとして存在し、元のページまでたどれて、どのツールが読んでも同じ答えが返ってくるとき、そのドキュメントはAIに対応できていると言えます。
15分でできるセルフチェック
- 決して間違ってはならない10個の事実を挙げます。主要指標、日付、金額、当事者、条件などです。
- 新しい会話で、ドキュメントを2〜3種類のAIアシスタントにアップロードします。
- 各事実を期間・通貨・ステータスとともに尋ねます:「売上はいくらで、どの期間のもので、実績ですか予測ですか?」
- 各回答の出所を尋ねます:「どのページ、またはどのスライドですか?」
- すべての回答を、正しい、間違い、補足条件の欠落、捏造のいずれかに分類します。
- ドキュメントを編集するたびに繰り返します。結果はレイアウトによって変わります。
よくある失敗
| 症状 | よくある原因 | 原本での修正方法 |
|---|---|---|
| 数字が欠落している | グラフや画像の中にしか存在しない | 値をテキストか小さな表で追加する |
| 期間が間違っている | 期間が数字から離れた列見出しや軸にある | 数値の横に期間を書く |
| 予測が実績として読まれる | ラベルが脚注や凡例にある | 「予測」「未監査」を値の横に置く |
| 桁が間違っている | 「単位:千」が冒頭で一度だけ示されている | 表の見出しで単位を繰り返す |
| 用語が混在している | 売上、販売額、GMVが区別なく使われている | 1つの指標には1つの用語を使う |
| スキャンしたページが読まれない | テキスト層がない | スキャンせず元のアプリから書き出す |
AIに対応できているドキュメントの兆候
- 画像ベースではなくテキストベースで、表が本物の表になっている。
- すべての指標の近くに期間、通貨、区分がある。
- 意味を変える補足条件(「最大」「プロフォーマ」「推定」)が値の横にある。
- 見出しによって、セクションを見つけて引用しやすい。
- 1つのアドレスに1つのバージョンだけがあり、古いコピーで作業している読み手がいない。
The Papers によるAIレディネスのスコアリング
ドキュメントをアップロードすると、The Papers はそのAIバージョンを作成し、原本と照合します。すべての数値、通貨、日付、期間が完全に一致すること、原本にない数値が現れないこと、スプレッドシートの数式が依存関係を解決したうえで保持されること、意味を変える補足条件が結び付いたまま残ること、各値がページ、スライド、セルへの参照を保持することを確認します。
その過程で見つかった問題は報告され、ある数値が売上かGMVかといった、原本で確定できない曖昧な点はあなたに送られて「オーナー確認済み」として記録されます。結果としてAIレディネスのスコアとステータスが得られます。「忠実性チェック済み」になるには重大な未解決事項がゼロである必要があり、強制できないため、このステータスは読み手にとって意味を持ちます。スコアとステータスはMarkdownのフロントマターにも記載され、エージェントが読み取れます。
公開後も確認を続ける
レディネスは一度きりのものではありません。ドキュメントは更新され、読み手は新しいツールを使い続けます。The Papers では、ドキュメントごとのアナリティクスで、誰がAIバージョンを読んだか(人かAIか)、どのエージェントやクローラーか、どのフォーマットかが分かるため、読み手が忠実性チェック済みバージョンにたどり着いているのか、まだ添付ファイルで作業しているのかを確認できます。
よくある質問
- AIレディネスのスコアが高ければ、AIが正しく答えることは保証されますか?
- 他のアシスタントがどう答えるかを保証できるツールはありません。忠実性チェック済みバージョンは、ほとんどの誤りが始まる抽出の工程をなくし、エージェントに忠実性チェック済みの数値を引用させます。
- ドキュメントを強制的に「忠実性チェック済み」にできますか?
- いいえ。The Papers では「忠実性チェック済み」になるには重大な未解決事項がゼロである必要があります。解決するのはあなたであり、上書きすることはできません。
- どのファイル形式をスコアリングできますか?
- PDF、PowerPoint、Excel、Word、Markdownです。スキャンしたPDFのページは、代替手段としてOCRで読み取ります。
- セルフチェックはどのくらいの頻度で行うべきですか?
- 重要な編集のたびに、そして重要な読み手にドキュメントを送る前に行ってください。