The Papers

ガイド

AIレディネス:AIがドキュメントを正しく読んでいるか確認する方法

AIがドキュメントを正しく読んでいるか確認するには、いくつかのアシスタントに重要な数値、期間、条件を尋ね、すべての回答を原本と1行ずつ比較してください。数字が補足条件を伴ったテキストとして存在し、元のページまでたどれて、どのツールが読んでも同じ答えが返ってくるとき、そのドキュメントはAIに対応できていると言えます。

15分でできるセルフチェック

  • 決して間違ってはならない10個の事実を挙げます。主要指標、日付、金額、当事者、条件などです。
  • 新しい会話で、ドキュメントを2〜3種類のAIアシスタントにアップロードします。
  • 各事実を期間・通貨・ステータスとともに尋ねます:「売上はいくらで、どの期間のもので、実績ですか予測ですか?」
  • 各回答の出所を尋ねます:「どのページ、またはどのスライドですか?」
  • すべての回答を、正しい、間違い、補足条件の欠落、捏造のいずれかに分類します。
  • ドキュメントを編集するたびに繰り返します。結果はレイアウトによって変わります。

よくある失敗

症状よくある原因原本での修正方法
数字が欠落しているグラフや画像の中にしか存在しない値をテキストか小さな表で追加する
期間が間違っている期間が数字から離れた列見出しや軸にある数値の横に期間を書く
予測が実績として読まれるラベルが脚注や凡例にある「予測」「未監査」を値の横に置く
桁が間違っている「単位:千」が冒頭で一度だけ示されている表の見出しで単位を繰り返す
用語が混在している売上、販売額、GMVが区別なく使われている1つの指標には1つの用語を使う
スキャンしたページが読まれないテキスト層がないスキャンせず元のアプリから書き出す

AIに対応できているドキュメントの兆候

  • 画像ベースではなくテキストベースで、表が本物の表になっている。
  • すべての指標の近くに期間、通貨、区分がある。
  • 意味を変える補足条件(「最大」「プロフォーマ」「推定」)が値の横にある。
  • 見出しによって、セクションを見つけて引用しやすい。
  • 1つのアドレスに1つのバージョンだけがあり、古いコピーで作業している読み手がいない。

The Papers によるAIレディネスのスコアリング

ドキュメントをアップロードすると、The Papers はそのAIバージョンを作成し、原本と照合します。すべての数値、通貨、日付、期間が完全に一致すること、原本にない数値が現れないこと、スプレッドシートの数式が依存関係を解決したうえで保持されること、意味を変える補足条件が結び付いたまま残ること、各値がページ、スライド、セルへの参照を保持することを確認します。

その過程で見つかった問題は報告され、ある数値が売上かGMVかといった、原本で確定できない曖昧な点はあなたに送られて「オーナー確認済み」として記録されます。結果としてAIレディネスのスコアとステータスが得られます。「忠実性チェック済み」になるには重大な未解決事項がゼロである必要があり、強制できないため、このステータスは読み手にとって意味を持ちます。スコアとステータスはMarkdownのフロントマターにも記載され、エージェントが読み取れます。

公開後も確認を続ける

レディネスは一度きりのものではありません。ドキュメントは更新され、読み手は新しいツールを使い続けます。The Papers では、ドキュメントごとのアナリティクスで、誰がAIバージョンを読んだか(人かAIか)、どのエージェントやクローラーか、どのフォーマットかが分かるため、読み手が忠実性チェック済みバージョンにたどり着いているのか、まだ添付ファイルで作業しているのかを確認できます。

よくある質問

AIレディネスのスコアが高ければ、AIが正しく答えることは保証されますか?
他のアシスタントがどう答えるかを保証できるツールはありません。忠実性チェック済みバージョンは、ほとんどの誤りが始まる抽出の工程をなくし、エージェントに忠実性チェック済みの数値を引用させます。
ドキュメントを強制的に「忠実性チェック済み」にできますか?
いいえ。The Papers では「忠実性チェック済み」になるには重大な未解決事項がゼロである必要があります。解決するのはあなたであり、上書きすることはできません。
どのファイル形式をスコアリングできますか?
PDF、PowerPoint、Excel、Word、Markdownです。スキャンしたPDFのページは、代替手段としてOCRで読み取ります。
セルフチェックはどのくらいの頻度で行うべきですか?
重要な編集のたびに、そして重要な読み手にドキュメントを送る前に行ってください。

最も重要なドキュメントでセルフチェックを行い、アップロードしてAIレディネスを確認しましょう。

関連ガイド